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了 路 


当前 ， 全 球 科技 革命 和 产业 变革 孕育 兴起 ， 以 深度 学 习 、 跨 界 融 


合 、 人 机 协同 、 群 智 开 放 、 上 自主 操控 为 特征 的 新 一 代 人 工 智能 不 断 取 


得 突破 ， 已 成 为 新 一 轮 科 技 革命 和 产业 变革 的 重要 驱动 力量 。 在 杖 大 


提升 人 类 生产 生活 品质 的 同时 ， 新 一 代 人 工 智能 具有 的 通用 目的 性 、 


算法 黑箱 性 以 及 数据 依赖 性 等 技术 特性 ， 引 发 了 社会 . 企业 、 个 人 等 


不 同 维度 的 风险 和 挑战 从 而 对 治理 提出 了 专业 化 .多 元 化 .敏捷 化 、 


全 球 化 的 迫切 需要 。 因 此 ， 人 工 智能 治理 这 一 概念 应 运 而 生 ， 成 为 国 


际 社会 广泛 关注 和 研究 的 方向 。 


人 工 智能 治理 是 一 项 复杂 的 系统 工程 ， 婚 需要 明确 治理 原则 、 目 


标 以 及 厘清 治理 主体 ， 又 需要 提出 切实 有 效 的 治理 措施 。 全 球 正 在 逐 


步 构建 起 人 工 智能 治理 框架 , 以 坚持 科技 造福 人 类 ,平衡 创新 发 展 与 


有 效 治 理 的 关系 作为 治理 目标 ， 采 用 多 元 主体 参与 、 协 同 共 治 的 治理 


机 制 ， 通 过 制定 伦理 原则 、 设 计 技术 标准 、 确 立法 律 法 规 等 综合 治理 


手段 ， 推 动人 工 智 能 健康 有 序 友 展 。 


人 工 智 能 的 治理 体系 需要 “柔性 的 伦理 ”和 “硬性 的 法 律 ”的 共 


同 构建 .一 方面 ,以 伦理 为 导向 的 社会 规 苑 体系 ,可 以 为 人 工 智能 技 


术 层 面 的 开 友 和 应 用 提供 价值 判断 标准 ,约束 和 指导 各 方 对 人 工 智能 


进行 协同 治理 。 众 多 国际 组 织 、 国 家 和 企业 选择 从 伦理 角度 入 手 ， 试 


图 确立 人 工 智能 的 基本 伦理 规 学 ， 探 索 清 晰 的 道德 边界 ， 并 积极 构建 


人 工 智能 伦理 的 落地 机 制 和 体系 。 另 一 方面 "以 法 律 为 保障 的 风险 防 


控 体 系 ， 依 靠 国家 强制 力 划 定 底线 ,可 以 防范 和 应 对 人 工 智 能 技术 这 


来 的 诸多 风险 。 整 体 来 看 ， 人 工 智 能 相关 立法 正 从 慌乱 走向 理性 ， 从 


源头 治理 走向 综合 治理 ， 从 粗放 治理 走向 精细 治理 。 同 时 ， 在 自动 罗 


驶 、 深 度 伪 造 、 智 能 金融 、 智 能 医疗 等 场景 下 , 人 工 智能 立法 取得 率 


先 突破 ,积累 了 一 定 的 监管 经 验 。 


本 自尽 书 从 人 工 智 能 第 三 次 当 潮 开辟 的 治理 新 需要 出 友 ,结合 当 


前 人 工 智 能 友 展 阶段 ， 分 析 了 全 球 目前 的 人 工 智能 治理 机 制 ， 重 点 介 


绍 了 两 项 主要 的 治理 举措 , 即 以 伦理 为 导向 的 社会 约束 体系 和 以 法 律 


为 保障 的 风险 防 控 体 系 ,最 后 对 人 工 智 能 治理 的 未 来 发 展 方向 进行 了 


展望 ， 期 竺 为 社会 各 方 提供 有 益 参 考 。 


一 、 人 工 智 能 开辟 治理 新 需要 
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人 工 智 能 是 指 ， 用 机 器 模拟 、 实 现 或 延伸 人 类 的 感 名 、 思 考 、 行 
动 等 智力 与 行为 能 力 的 科学 与 技术 。 作 为 引领 未 来 的 战略 性 技术 ,人 
工 智能 是 新 一 轮 科 技 革命 和 产业 变革 的 重要 驱动 力量 ,已 经 成 为 国际 
竞争 的 新 焦点 、 经 济 友 展 的 新 引擎 。 人 工 智 能 在 极 大 提升 人 类 生产 水 
平和 生活 品质 的 同时 ， 也 融 来 了 新 风险 、 引 上 友 了 新 间 题 ， 对 一 个 国家 
治理 能 力 的 法 治 化 、 智 能 化 、 专 业 化 水 平 提 出 全 新 要 求 。 目 前 ， 国 际 
社会 纷纷 呼吁 加 强人 工 智能 治理 ,发 展 安全 可 信 、 负责 任 的 人 工 智能 。 

《一 ) 人 工 智能 时 代 的 兴起 

人 工 智能 概念 的 提出 ， 始 于 1956 年 美国 达 特 茅 斯 会 议 。 人 工 智 
能 至 今 已 有 60 多 年 的 上 友 展 历程 ， 从 诞生 至 今 经 历 了 三 次 发展 当 潮 。 
前 两 次 滔 潮 中 ,由 于 算法 的 阶段 性 突破 而 达到 高 潮 ， 之 后 又 由 于 理论 
方法 缺陷 、 产 业 基础 不 足 、 场 景 应 用 受 限 等 原因 而 没有 达到 人 们 最 初 
的 预期 ， 并 导致 了 政策 广 持 和 社会 资本 投入 的 大 幅 缩减 ， 从 而 两 次 从 
高 潮 陷入 低谷 . 近年 来 ,在 移动 互联 网 、 大 数据 、 超级 计算 、 传 感 网 、 


脑 科 学 等 新 理论 新 技术 以 及 经 济 社会 友 展 强烈 需求 的 共同 驱动 下 ,以 
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深度 学 习 、 跨 界 融合 、 人 机 协同 、 群 智 开 放 、 自 主 操控 为 特征 的 新 一 
代 人 工 智 能 技术 不 断 取得 新 突破 , 迎 来 了 人 工 智能 的 第 三 次 发 展 溪 潮 。 

1. 人 工 乔 能 驱动 新 一 轮 科 技 革 命 

人 工 智 能 是 当前 科技 革命 的 制高点 ,以 智能 化 的 方式 广泛 联结 各 
领域 知识 与 拔 术 能 力 ， 释 放 科 技 革 命 和 产业 变革 积 著 的 巨大 能 量 ， 成 
为 全 球 科技 战 的 争 村 焦点 。 世界 主要 帮 达 国家 纷纷 把 发 展 人 工 智能 作 
为 提升 国家 竞争 力 的 主要 抓 手 ,努力 在 新 一 轮 国际 科技 竞争 中 掌握 主 
导 权 ， 围 绕 基 础 研 友 、 资 源 开 放 。 人 才 培 养 、 公 司 合作 等 方面 强化 部 
署 。 例 如 ， 美 国 为 人 工 智 能 研 上 投入 大 量 守 金 ， 确 保 其 人 工 智 能 在 全 
球 的 领先 地 位 ; 英国 利用 其 在 计算 技术 领域 的 积累 ， 致 力 于 建设 世界 
级 人 工 智能 创新 中 心 ; 日 本 以 建设 超 智 能 社会 5.0 为 引领 ， 旨 在 强化 
其 在 汽车 、 机 器 人 等 领域 全 球 领先 优势 

2. 人工 智 能 打造 经 济 发 展 新 引擎 

当前 ， 以 智能 家 居 、 智 能 网 联 汽车 、 智 能 机 器 人 等 为 代表 的 人 工 
智能 新 兴 产 业 加 速 友 展 ， 经 济 规模 不 断 扩 大， 正成 为 融 动 经 济 增长 的 
重要 引擎 。 音 华 永 道 提出 ， 人 工 智能 将 显著 提升 全 球 经 济 ， 到 2030 
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年 ， 人 工 智 能 将 促使 全 球 生产 总 值 增长 14%， 为 世界 经 济 贡献 15.7 
万 亿美 元 产值 。 一 方面 ， 人工 智 能 驱动 产业 智能 化 变革 ， 在 数字 化 、 
网 络 化 基础 上 ， 重 塑 生 产 组 织 方式 ， 优 化 产业 结构 ， 促 进 传统 领域 智 
能 化 变革 ,引领 产业 向 价值 链 高 端 迈进 ， 全 面 提升 经 济 帮 展 质量 和 效 


答 。 另 一 方面 ,人 工 智能 的 普及 将 推动 多 行业 的 创新 ， 大 幅 提 升 现 有 


乳 


动 生产 率 ， 开 辟 靳 新 的 经 济 增长 空间 。 据 埃 森 哲 预测 ，2035 年 人 


居 


工 智 能 将 推动 我 国 劳动 生产 率 提高 27% ,经 济 总 增加 值 提升 7.1 万 亿 


JUL。 


炎 


3. 人 工 智 能 显著 提升 社会 生活 质量 

人 工 智 能 在 教育 、 医 疗 、 关 老 等 民生 服务 领域 应 用 广泛 ， 推 动 服 
务 模式 不 断 创新 ,服务 产品 日 益 优 化 ,创新 型 智能 服务 体系 逐步 形成 。 
在 医疗 方面 ,人工 智能 不 断 提升 医疗 水 平 ， 特 别 是 在 新 冠 肺炎 疫情 期 
间 ， 人 工 智 能 在 疫情 监测 、 疾 病 诊 断 、 药 物 研 发 等 方面 发 挥 了 重要 作 
用 。 在 教育 方面 ,人工 智 能 的 应 用 加 快 了 开放 灵活 的 教育 体系 的 建设 
工作 ， 能 够 实现 因材施教 ， 推 动 个 性 化 教育 上 友 展 ， 进 一 步 促进 教育 公 


平和 提升 教育 质量 。 在 养老 方面 ,人 工 智能 在 助残 养老 领域 的 应 用 不 
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断 丰 富 和 创新 ,人 在 帮助 残疾 人 和 老人 提升 生活 自理 能 力 和 尊严 感 方面 
发 挥 重 要 作用 。 例 如 ,护理 型 机 器 人 通过 与 照护 对 象 进行 交 互 性 治疗 ， 
可 以 降低 老年 人 的 孤独 感 ， 极 大 改善 老年 人 的 生活 。 

(二 ) 人 工 智能 的 技术 特性 

人 类 正 处 于 一 个 前 所 未 有 的 时 期 ， 互 联网 、 移 动 通信 、 物 联网 、 
云 计 算 、 大 数据 、 人 工 智 能 等 信息 技术 正在 推动 社会 逐步 进入 智能 化 
时 代 。 相 较 于 其 他 领域 的 新 技术 ， 由 于 新 一 代 人 工 智能 具有 的 技术 特 
性 ， 使 其 更 为 复杂 、 更 不 可 控 、 更 难 预测 。 

1. 通用 目的 性 ， 导 致 风险 更 为 着 遍 

人 工 智能 作为 一 项 通用 目的 扩 术 ， 可 以 应 用 到 自动 驾驶 、 智 能 制 
造 、 智 慧 城市 、 智 慧 医疗 等 诸多 领域 场景 中 ， 并 且 能 够 与 大 数据 、 云 
计算 等 数字 技术 互补 互 促使 用 , 有 着 极 强 的 技术 溢出 效应 ， 对 经 济 社 
会 高 质量 友 展 显现 出 强劲 的 引领 市 动作 用 。 但 与 此 同时 ,人工 智能 技 
术 风 险 皮 生 的 学 围 会 随 着 应 用 场景 的 日 趋 广 泛 而 逐步 扩大 ,问题 友 生 
的 可 能 性 也 会 随 着 其 应 用 频次 的 增长 而 持续 提高 ,名 不 及 时 有 效 治 理 ， 


将 会 严重 影响 人 类 生产 生活 。 
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性 ， 了 导致 过 程 更 难 解 释 


2.， 算法 黑箱 
算法 模型 被 普遍 应 用 ， 


目前 ， 以 深度 学 习 算 法 为 核心 的 人 工 智 角 


但 由 于 其 算法 结构 中 人 存在 多 个 “ 隐 层 ” ， 
青 楚 解释 ,用户 只 能 


致 输入 数据 和 输出 结果 之 
被 动 接受 由 算法 市 来 的 结 











间 的 因果 逻辑 天 系 难 以 清 

果 而 无 法 洞悉 其 运行 过 程 ， 从 而 形成 一 种 技术 “黑箱 "。 此 外 ， 人 工 
5 本 
降 层 
人 工 特征 表达 


深度 学 习 


自动 学 习 高 级 特征 组 合 





还 具有 自 适应 、 目 学 习 等 特性 ， 导 致 其 极 易 偏离 人 关子 


智能 算法 模型 
设 的 目标 ， 其 复杂 程度 钨 友 超 出 人 类 理解 学 畴 
来 源 : 资料 整理 


图 1 “深度 学 习 与 传统 机 器 学 习 的 差别 图 
3: 数据 依赖 性 ， 隆 致 结果 更 不 可 控 
数据 是 人 工 智能 模型 训练 及 优化 的 “燃料 ”， 是 人 工 智 能 算法 做 
出 正确 公平、 合理 决策 的 基础 保障 .。 输入 数据 的 数量 规模 、 准 确 性 、 
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通用 性 、 包 容 性 、 全 面 性 等 质量 因素 将 直接 决定 训练 得 到 的 模型 的 质 
量 。 同 时 ， 数 据 本 质 上 是 社会 价值 观 的 缩影 与 映射 ， 因 此 也 会 包含 一 
些 沙 后 的 价值 观 与 社会 偏见 。 各 未 能 对 数据 质量 进行 有 效 把 控 ,人 工 
智能 算法 模型 便 很 可 能 习 得 数据 中 的 偏见 让 误 ,并 将 其 反映 到 训练 结 
果 中 ， 致 使 人 工 智能 系统 的 功能 行为 及 其 影响 变 得 更 不 可 控 。 

《三 ) 人 工 智 能 引发 不 同 维度 的 风险 

作为 引领 未 来 的 战略 性 技术 ， 人 工 智能 在 打造 经 济 帮 展 新 引擎 、 
推动 人 类 文明 运 上 新 台阶 的 同时 ,也 给 社会 、 企 业 和 个 人 市 来 了 不 同 
维度 的 风险 挑战 。 

1. 社会 维度 ; 影响 社会 稳定 

一 是 冲击 就 业 格局 ， 加 剧 财富 分 化 。 智 能 的 算法 、 机 器 对 传统 人 
工 的 替代 在 解放 人 力 郁 动 者 的 同时 ,直接 市 来 了 对 融 业 的 冲击 。 从 事 
重复 性 、 机 械 性 等 工作 的 秀 动 者 更 容易 被 人 工 智能 蔡 代 工作 。 据 麦 上 衣 
锡 报告 推测 ， 到 2030 年 机 器 人 将 取代 8 亿 人 的 工作 。 与 历史 上 的 技 
术 革 命 类 似 ， 人 工 智能 的 友 展 同样 会 导致 利益 的 分 化 与 重 构 ， 新 创造 


的 社会 财富 将 会 不 成 比例 地 向 资本 一 方 倾 斜 , 低 收入 与 受 教育 程度 较 
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低 的 人 群 将 在 新 一 轮 的 社会 资源 分 配 中 处 于 严重 的 不 利 地 位 。 


二 是 影响 政治 进程 ,抹黑 政治 人 物 。 人 工 智 能 在 社交 服务 中 的 应 


用 能 够 影响 政治 进程 ， 利 用 机 器 人 水 军 可 以 进行 导 论 干预 。 例 如 ， 剑 


桥 分 析 公 司 利 用 人 工 智 能 ， 辅 助 进行 竞 选 荣 略 ， 影 响 美 国 大 选 结果 。 


此 外 ,可 以 利用 深度 伪造 等 智能 信息 服务 技术 制作 关于 政治 人 物 的 虚 


假 负面 视频 。 例 如 ，2018 年 4 月 ， 美 国 前 总 统 奥巴马 的 脸 被 “借用 


来 攻击 特 朗 普 总 统 ， 视 频 在 YouTube 土 被 转发 500 多 万 次 。 


是 侵害 事件 频 发 ， 危 及 公共 安全 。 人 工 智能 安全 事故 、 侵 害 事 
件 频 发 ， 引 发 社会 各 界 普遍 关注 。 例 如 ， 特 斯 拉 Model S 在 美国 和 我 
国境 内 都 曾 发 生 过 自动 驾驶 致死 事故 和 数 起 交通 事故 ; 2018 年 委 内 
瑞 拉 总 统 在 公开 活动 中 受到 无 人 机 炸弹 袭击 ,这 是 全 球 首 例 利用 人 工 
智能 产品 进行 的 恐怖 活动 ; 2018 年 ， 优 步 的 一 辆 自动 驾驶 测试 车 在 
进行 路 试 时 发 生 事故 ， 导 致 一 行人 死亡 。 

2. 企业 维度 : 加 大 合 规 难度 

一 是 不 良 信息 频 现 ， 企 业 审核 能 力 不 足 。 如 果 向 人 工 智能 系统 输 


入 不 完整 .不 正确 .质量 不 高 的 数据 则 会 产生 不 展 或 者 层 视 性 信息 ，， 
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即 所 谓 的 “垃圾 进 ， 二 圾 出 *“。 例 如 微软 公司 的 人 工 智能 聊天 机 器 人 
Tay 上 线 后 ， 被 网 民 “ 教 坏 ” ,发 布 诽谤 性 的 、 层 视 性 的 推 文 。 此 外 ， 
人 工 智能 技术 极 大 地 促进 数字 内 容 产业 的 繁荣 。 预 计 到 2022 年 ， 全 
球 互联 网 流量 将 达到 每 秒 7.2 PB。 企业 试图 依靠 传统 审核 模式 实现 内 
容 的 准确 判断 并 及 时 应 对 信息 爆炸 引发 等 各 类 问题 ; 越发 捉襟见肘 。 

二 是 法 律 责任 不 明 ,陷入 责任 划分 困境 。 由 于 当前 人 工 智 能 产品 
在 问题 回 湖上 存在 不 可 解释 环节 ,而 且 现 行 立法 也 未 明确 界定 人 工 智 
能 的 设计 、 生 产 、 销 售 、 使 用 等 环节 的 各 方 主体 责任 与 义务 ， 这 给 人 
工 智能 安全 事件 的 责任 认定 和 划分 带 来 严峻 挑战 。 例 如 ， 人 工 智能 医 
疗 助理 ( 例如 本 M 的 “ 沃 森 医 生 ”) 给 出 危险 错误 的 癌症 医疗 建议 时 
的 责任 认定 等 问题 。 而 且 ， 当 人 工 智能 出 现 自主 决策 能 力 后 ， 自 动 驾 
驶 汽车 因 独 立 智 能 决策 致 损 时 ， 如 何 确定 侵权 主体 及 划分 责任 。 

三 是 知识 产权 保护 不 足 ， 版 权 认 定 困难 。 目 前 ， 各 国 就 人 工 智能 
生成 物 所 包含 的 权利 类 型 和 权利 归属 存 有 争议 ,人 工 智能 创作 物 的 版 
权 保护 仍 普 人 遍 面临 法 律 滞后 问题 。 例 如 ， 澳 大 利 亚 法 院 判定 ， 利 用 人 


工 智能 生成 的 作品 不 能 由 版 权 保护 ,因为 它 不 是 人 类 制作 的 。 如 果 人 
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工 智能 创作 物 得 不 到 法 律 有 力 的 保护 ,会 使 得 人 工 智能 生成 信息 的 复 
制 和 扩散 门槛 更 低 影响 投资 人 . 创造 人 投入 人 工 智能 创作 的 积极 性 。 

3. 个 人 维度 : 侵犯 基本 权 关 

一 是 算法 偏见 现象 ， 影响 公 平 正 义 。 人 工 智能 算法 并 非 绝对 客观 
世界 的 产物 ， 算 法 偏见 不 仅 是 技术 问题 ， 更 涉及 到 对 算法 处 理 的 数据 
集 质量 的 完整 性 、 算 法 设计 者 的 主观 情感 偏向 、 人 类 社会 所 固有 的 偏 
见 、 甚 至 不 同 地 区 文化 差异 等 各 方面 问题 。 例 如 ， 美国 一 些 法 院 适 用 
的 风险 评估 算法 COMPAS 被 发 现 对 黑人 造成 了 系统 性 歧视 。 人 脸 识 
别 软件 Rekognition， 曾 将 美国 国会 议员 中 的 28 人 误 判 为 罪犯 。 

二 是 信息 收集 多 样 ， 侵 犯 个 人 隐私 。 随 着 人 脸 识 别 、 虹 膜 识 别 等 
应 用 的 普及 ， 人 工 智 能 正在 大 规模 、 不 间断 地 收集 、 使 用 敏感 个 人 信 
息 ， 个 人 隐私 泄露 风险 加 大 。 例 如 ， 变 脸 应 用 “ZAO” 因 用 户 协议 过 
度 抽 取 用 户 授权 、 存在 数据 泄漏 问题 而 被 监管 机 构 约 谈 要 求 自 查 整改 。 
杭州 一 动物 园 因 局 用 人 脸 识 别 技术 ,强制 收集 游客 敏感 个 人 信息 而 被 


诉 至 法 院 ， 成 为 我 国 “ 人 脸 识 别 第 一 案 “。 


是 滥用 智能 产品 ,侵犯 人 格 尊严 。 利 用 深度 伪造 撤 术 能 实现 将 
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人 脸 移 转 到 色情 明星 的 身体 ， 伪造 遏 真 的 色情 场景 ， 使 污 名 化 他 人 及 
色情 报复 成 为 可 能 。 例 如 ， 通 过 DeepNude 软件 ， 输 入 一 张 完 整 的 女 
性 图 片 就 可 一 键 生成 相应 的 裸照 。 此 外 ， 还 发 生 过 亚马逊 智能 音箱 劝 
主人 自杀 等 事件 。 

(四 ) 人 工 智能 治理 的 新 挑战 

人 工 智 能 扩 术 的 友 展 已 经 进入 了 某 些 科技 领域 的 “无 人 区 ”， 人 
工 智能 除 技术 本 身 可 能 友 生 问题 之 外 ,诸多 应 用 在 使 用 过 程 中 也 存在 
负 效 应 。 但 目前 ， 相 应 的 风险 防 探 机制 和 规则 制定 相对 滞后 ， 不 可 控 
的 预期 与 担忧 使 得 人 工 智能 在 创新 上 面临 巨大 的 压力 ,人工 智 能 治理 
也 就 成 为 了 人 工 智 能 技术 和 应 用 发 展 到 一 定 阶段 的 必然 结果 。 联合 国 
全 球 治理 委员 会 对 治理 的 概念 进行 了 界定 ， 认 为 “治理 ”是 指 “ 各 种 
公共 的 或 私人 的 个 人 和 机 构 管理 其 共同 事务 的 诸多 方法 的 总 和 ,是 将 
相互 冲突 的 或 不 同 利益 得 以 调和 ， 并 采取 联合 行动 的 持续 过 程 。 当 
前 ”虽然 各 界 对 于 人 工 智 能 治理 的 内 涵 没 有 统一 的 界定 ， 但 本 白皮书 
将 人 工 智能 治理 解释 为 ， 国 际 组 织 、 国 家 、 行 业 组 织 、 企 业 等 多 主体 


对 人 工 智能 研究 、 开 发 、 生 产 和 应 用 中 出 现 的 公共 安全 、 道 德 伦理 等 
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问题 进行 协调 、 处 理 、 监 管 和 规 泡 的 过 程 。 人 工 智 能 治理 既 需 合理 利 
用 人 工 智能 的 优势 ， 又 要 善于 规避 人 工 智 能 的 负 效应 ， 以 推动 全 人 类 
社会 福 社 。 

1. 治理 专业 化 的 需要 

面 对 人 工 智 能 可 能 引发 的 新 的 全 球 焦虑 ,人 工 智 能 监管 机 构 应 及 
时 察觉 、 管 控 危 机 、 防 范 潜 在 风险 。 但 目前 ， 各 国人 工 智能 监管 机 构 
大 多 由 政治 实体 组 成 ， 在 应 对 人 工 智能 等 新 议题 的 挑战 时 ， 需 要 与 专 
业 知 识 共 同体 形成 有 效 联 动 。 因 此 ,监管 机 构 应 当 以 深厚 的 专业 化 知 
识 作为 治理 基石 ， 构 建 起 涵盖 人 工 智能 相关 的 数学 、 计 算 机 科学 等 学 
科 的 专业 化 治理 团队 ， 为 监管 提供 必要 的 知识 储备 和 智力 支持 。 

2. 治理 多 元 化 的 需要 

人 工 智能 本 身 是 一 门 综合 性 的 前 沿 学 科 和 高 度 交叉 的 复合 型 学 
科 ， 研 究 范畴 广泛 而 又 异常 复杂 。 人 工 智能 的 治理 需要 计算 机 科学 、 
数学 、 认 知 科学 、 神 经 科学 和 社会 科学 等 学 科 深 度 融 合 ， 这 引发 了 对 
于 人 工 智能 治理 主体 多 元 构成 的 需求 .近年 来 国际 组 织 . 各 国政 府 、 


行业 组 织 和 企业 等 各 类 主体 也 在 积极 探索 多 元 主体 参与 的 协同 共 治 


11 


人 工 智 能 治理 白皮书 








治理 格局 。 因为 只 有 在 治理 过 程 中 ,不断 推动 多 领域 间 进 行 广泛 交 沅 
和 合作 ， 采 用 灵活 多 元 的 方式 ， 才 能 避免 某 些 不 可 逆 的 问题 出 现 。 

3. 治理 敏捷 化 的 需要 

人 工 智 能 的 产业 革命 呈现 出 高 速 迭 代 化 的 特征 ,各 种 细 分 领域 的 
产业 化 应 用 层出不穷 。 新 兴业 态 呼唤 新 的 治理 方案 ， 在 治理 原则 、 治 
理 主体 和 治理 手段 上 有 别 于 传统 治理 框架 ,引发 了 对 于 人 工 智 能 治理 
敏捷 化 的 需要 。 在 治理 过 程 中 ， 需 要 通过 不 断 提升 技术 手段 ， 优 化 治 
理 机 制 ， 及 时 友 现 和 解决 可 能 引 友 的 风险 ， 对 更 高 级 人 工 智能 的 潜在 


风险 持续 开展 研究 和 预 判 ,确保 人 工 智能 朝 着 有 利于 社会 的 方向 发 展 。 
4. 治理 全 球 化 的 需要 
人 工 智 能 作为 一 种 通用 性 撤 术 ,所 引发 的 人 员 和 失业、 公共 安全 等 
问题 具有 全 球 性 ， 需 要 全 球 共 同 面 对 并 达成 全 球 性 共识 ， 而 且 人 工 智 
能 的 不 稳定 与 多 样 化 应 用 又 呼唤 相对 统一 的 治理 规则 与 国际 合作 . 只 
有 世界 各 国共 同 寻 求 有 效 路 径 ， 探 索 全 球 问题 的 解决 之 道 ,才能 使 人 
工 智 能 在 可 见 的 甚或 遥远 的 未 来 更 好 地 造福 于 人 类 ,及 时 管控 可 能 的 


危机 以 及 防 学 潜在 风险 。 
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二 、 全 球 构 建 人 工 智能 治理 机 制 
人 工 智能 治理 是 一 项 复杂 的 系统 工程 , 既 需 要 明确 治理 原则 及 目 


标 、 悍 清治 理 主 体 ， 又 需要 提出 切实 有 效 的 治理 措施 。 为 此 ， 人 工 智 
能 治理 应 当 构 建 由 政府 、 行 业 组 织 、 企 业 以 及 公众 等 多 元 主体 共同 参 
与 、 协 同 合作 的 多 层次 的 治理 体系 ， 通 过 制定 伦理 原则 、 设 计 技术 标 
准 、 确 立法 律 法 规 等 多 种 举措 ， 实 现 科技 向 善 、 造 福 人 类 的 总 体 目标 


愿景 ， 推 动人 工 智能 健康 有 序 友 展 。 


治理 目标 


全 面 释放 人 工 智能 带 来 的 技术 红利 和 价值 目 精准 防范 并 应 对 人 工 智能 可 能 带 来 的 风险 





来 源 : 资料 整理 
图 2 ”人工 智 能 治理 机 制图 
(一 ) 治理 目标 : 坚持 科技 造福 人 类 ， 平 衡 创新 发 展 与 
有 效 治理 
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忌 体 来 说 ,人工 智 能 治理 应 以 科技 造福 人 类 为 总 体 目标 ， 既 要 不 
断 释 放 人 工 智能 所 融 来 的 技术 红利 ,也 要 精准 防范 并 积极 应 对 人 工 智 
能 可 能 市 来 的 风险 ,需要 平衡 好 人 工 智能 创新 发 展 与 有 效 治理 的 天 系 ， 
持续 提升 有 关 算 法 规则 、 数 据 使 用 、 安 全 保障 等 方面 的 治理 能 力 ,为 
人 工 智能 莒 造 规 孙 有 序 的 友 展 环境 。 

1. 不 断 释 放 人 工 乔 能 带 来 的 技术 红利 和 价值 

人 工 智 能 作为 一 项 新 型 通用 目的 性 技术 ,将 在 改造 升级 传统 产业 、 
培育 新 兴 产 业 、 加 速 实 体 经 济 转型 、 保 障 改 善 民 生 等 经 济 社 会 帮 展 诸 
多 天 键 环节 上 友 挥 重要 作用 。 例 如 ， 阿 根 廷 、 巴 西 等 国 在 其 友 布 的 人 工 
智能 国家 战略 中 明确 指出 “人 工 智 能 应 提升 各 利益 依 关 方 的 福 社 “将 
人 工 智 能 对 科技 发 展 、 竞 争 力 与 生产 力 提升 、 公 共 福 利 增强 的 促进 作 
用 最 大 化 “， 最 大 程度 释放 人 工 智能 技术 红利 。 在 我 国 ， 目 前 人 工 智 
能 正在 与 制造 业 、 交 通 、 物 沅 、 农 业 、 公 共 服 务 等 依 天 社会 民生 的 行 
业 进 行 不 同 程度 的 融合 ， 逐 渐 创 造 出 了 新 产品 、 新 服务 、 新 业态 、 新 


模式 ， 形 成 创新 驱动 力 、 促 进 传统 行业 变革 、 促 进 实 体 经 济 增长 ， 


局 


断 释 放 人 工 智能 技术 红利 和 潜在 价值 ， 推 动 实现 经 济 高 质量 友 展 。 
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2. 精准 防范 并 应 对 人 工 智 能 可 能 带 来 的 风险 
人 工 智 能 在 为 人 类 社会 此 展 带 来 更 多 便利 、 更 高 效率 的 同时 ,也 
会 进一步 模糊 机 器 世界 与 人 类 世界 的 边界 ， 导 致 诸如 算法 歧视 、 隐 私 
保护 、 权 利 保 障 等 风险 问题 ， 甚 至 会 引发 社会 失业 、 威 胁 国家 安全 等 
严峻 挑战 。 鉴 于 人 工 智能 市 来 的 风险 涉及 泡 围 广 、 影 响 大 ， 因此 用 
要 从 全 球 治理 的 高 度 ,重新 审视 并 思考 如 何 精准 防 学 并 有 效应 对 解决 
人 工 智能 所 市 来 的 风险 挑战 ,以 避免 人 工 智能 对 人 类 社会 发 展 产 生 的 
负面 影响 。 例 如 ， 韩 国 在 《人 工 智能 国家 战略 》 中 提出 “防止 人 工 智 
能 产生 负面 效应 制定 人 工 智 能 伦理 体系 ,推进 监测 人 工 智 能 信赖 度 、 
安全 性 等 的 质量 管理 体系 建设 ”等 引导 人 工 智 能 安全 友 展 的 要 求 。 
平衡 好 人 工 智 能 创新 发 展 与 有 效 治 理 的 关系 是 关键 。 一 方面 ,过 
于 严 苛 的 治理 方式 会 限制 人 工 智 能 扩 术 的 创新 与 进步 ,导致 任何 技术 
创新 都 步履 维 艰 。 但 另 一 方面 ,没有 任何 监管 与 规制 的 人 工 智 能 极 易 
“ 走 偏 ” 甚 至 “ 误 入 收 途 ”， 给 人 类 社会 带 来 风险 与 危害 ， 违 背 科 技 
造福 人 类 的 目标 愿景 。 因 此 ,应当 找到 创新 发 展 与 有 效 治 理 之 间 的 平 


衡 点 ， 坚 持 安全 可 控 的 治理 机 制 ， 将 开放 创新 的 技术 友 展 并 重 ， 给 予 
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技术 进步 与 市 场 创新 适当 的 试 错 、 调 整 空间 ,对 人 工 智能 友 展 既 不 简 
单 粗 暴 、 一 刀 切 似 地 扼杀 ， 也 不 任 其 自由 泛滥 ， 而 是 要 充分 发 挥 出 多 
元 主体 协同 共 治 的 效能 ， 使 各 方 各 司 其 职 、 各 尽 其 力 ， 把 握 好 治理 原 
则 ， 守 住 治理 底线 ， 确 保 人 工 智能 产业 创新 活力 与 发 展 动力 ,提升 公 
众 在 使 用 人 工 智能 技术 及 产品 时 的 获得 感 、 安 全 感 、 笠 和 福 感 。 

《二 ) 治理 模式 : 打造 多 元 主体 参与 、 协 同 共 治 的 模式 

人 工 智 能 治理 的 重要 特征 之 一 是 治理 主体 的 多 元 化 ,其 依赖 于 包 
括 国 家 政府 .行业 组 织 . 企业 . 公众 在 内 的 各 利益 依 关 方 的 参与 合作 、 
各 司 其 职 、 各 尽 其 能 ， 以 适当 的 角色 、 最 佳 的 方式 协同 共 治 ， 从 而 构 
建 严 谨 、 人 全面、 有 效 的 全 新 治理 模式 . 

1. 国家 政府 是 执行 治理 规则 的 核心 主体 

国家 政府 在 人 工 智能 治理 中 友 挥 着 领导 性 作用 ,主要 体现 在 国家 
层面 上 统领 人 工 智能 技术 研发 与 治理 框架 的 搭建 ,专业 管理 机 构 的 设 
立 ,以 及 政策 与 法 律 规则 的 制定 等 方面 。 国 家 政府 作为 肩负 公共 事务 
管理 职责 的 公 权 力 机 关 ， 是 公共 利益 和 广大 民意 的 代言 人 ， 同 时 也 是 


国家 安全 和 社会 稳定 的 捍卫 者 ,对 人 工 智 能 技术 进行 治理 便 是 应 有 之 
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义 。 为 此 ， 


发 与 投资 路 线 , 监 


成 立 的 管理 机 构 较 多 


欧盟 以 及 英国 则 更 加 天 注 经 济 、 


理 与 保护 。 日 本 重点 天 注 智 


督 和 管理 为 人 工 智 
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分 别 


各 国政 府 增设 专业 管理 机 构 ， 积 极 布局 人 工 智 


能 友 展 设 定 的 标准 和 规则 。 


产业 方面 的 监管 议 


能 制造 、 健 康 医疗 、 智 角 


能 技术 的 研 


美国 


聚焦 于 军事 、 技术 研发 等 方面 的 监督 管理 。 


题 ， 并 注重 数据 治 


通 等 领域 的 应 














用 与 监管 。 整 体 上 来 看 ， 各 国 管理 机 构 的 人 员 背 景 具有 多 元 化 ， 机 构 
职 和 全 /月 县 有 多 样 化 的 特点 。 
表 1 各 国人 工 智能 管理 机 构 
国家 | 监管 机 构 名 称 | 。 监管 相关 职责 建立 时 间 “| 。 负责 部 门 
监督 各 行业 .研究 机 构 
机 器 学 习 与 人 | 美国 国家 科学 
工 智能 分 委 会 以 及 政府 部 门 的 人 工 」】 2016 年 5 月 己 枝 术 委员 会 
人 | 智能 研发 
宫 科技 政策 
办 公 室 、 美国 
负责 审查 联邦 机 构 的 
国 谎 5 能 ss 
全 二 “| 人 工 智能 领域 投资 和 | 2018 年 5 月 人 
攻 二 AID 委员 会 
开发 方面 的 优先 事项 
美国 防 部 高 级 研究 
计划 局 等 
半 人、 口 各 吕 监管 国 口 
联合 人 工 智能 | 监管 国防 机 构 人 工 智 | ,st 有 | 闫 下 Da 
中 心 能 工作 
考察 并 监督 人 工 智 能 美国 众议院 起 
人 工 智能 国家 | 技术 应 用 在 军事 中 的 | ,，。 和 ) 有 | 装 孝 队 新 型 成 
安全 委员 会 “| 情况， 评估 其 安全 、 伦 肋 与 能 力 小 组 
理 、 对 国际 法 影响 等 风 委员 会 
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国家 | 监管 机 构 名 称 | ”监管 相关 职责 建立 时 间 “| ”负责 部 门 
险 
研究 并 起 草 人 工 智 能 
工 智 能 高 
欧盟 | 人 人 监管 框架 并 指导 欧洲 | 2018 年 6 月 | 欧盟 委员 会 
相关 企业 进行 落实 
监督 英国 人 工 智能 战 
人 工 智能 理事 | 英国 政府 人 工 
| 略 实施 并 为 政府 提出 | 2018 年 4 月 | 人 
会 智能 办 公 室 
建议 
审查 . 监管 现 有 的 数据 
( 包括 人 工 智能 ) 治 理 
数据 伦理 和 创 
英国 | 格局 ， 并 就 其 安全 道 | 2018 年 1 月 | 英国 政府 
。 德 . 创新 使 用 为 政府 提 
出 建议 
负责 提供 人 工 智能 发 
人 工 智能 特别 | ”人 了 网 
mA | 展 建 议 , 为 AI 上 发 展 设 | 2018 年 4 月 | 英国 上 议院 
”| 定 标 解 顺 则 
人 工 智 能 伦理 | 监督 军用 人 工 智能 的 
法 国 2019 年 4 月 法 国政 府 
委员 会 | 发 展 
国家 层面 的 人 工 智能 
人 工 智能 技术 | 、、 盯 
日 本 | ”人 gxi | 综合 管理 机 构 ,负责 政 | 2016 年 4 月 | 。 日 本 政府 
二 策 及 应 用 的 监管 
人 工 智能 伦理 | 制定 人 工 智能 产品 研 
印度 2018 年 6 月 印度 政府 
委员 会 联盟 “| 发 标准 
工 智 能 办 公 | 规范 人 工 智 能 健康 发 
本 所 入 台 力 公 规范 人 工 智能 健康 发 | ， is 人， 有 | 旺 天 pr 
局 ) 军 展 
国家 科技 体制 
新 一 代 人 工 智 | 研究 人 工 智能 相关 法 nn 
中 国 | 能 发 展 规划 推 | 律 、 伦 理 、 标 准 、 社 会 | 2017 年 11 月 ee 
、 ， es 系 建设 领导 小 
进 办 公 室 | 问题 以 及 治理 议题 攻 





来 源 : 资料 整理 





人 工 智 能 治理 白皮书 








2. 政府 间 国 际 组 织 是 引导 治理 方向 的 重要 力量 

人 工 智 能 的 发 展 具有 跨国 界 、 国 际 分 工 的 特征 ， 需 要 政府 间 国 际 
组 织 加 强国 家 间 协 调 合 作 。 因此， 政府 间 国 际 组 织 在 全 球 人 工 智 能 治 
理 中 扮演 着 引导 者 和 推动 者 的 角色 。 首先， 政府 间 国 际 组 织 引 导 人 工 
智能 领域 形成 大 国共 识 。 由 于 各 国 在 人 工 智 能 技术 研发 的 关注 与 投入 
不 同 ,关于 人 工 智能 治理 的 规则 率先 在 发 达 国家 形成 和 扩散 。 政 府 间 
国际 组 织 作 为 引领 国际 规则 制定 的 风向 标 ,也 在 早期 焉 针对 人 工 智 能 
与 监管 展开 讨论 ， 汲 取 各 国 天 于 人 工 智能 治理 的 原则 性 宣言 ,3 引导 人 
工 智能 治理 稳步 迈 向 并 达成 国际 共识 。 其 次 ,政府 间 国际 组 织 推 动人 
工 智能 治理 规则 的 全 球 共享 。 人 工 智 能 技术 在 各 国 发 展 参差 不 齐 ， 多 
数 发 展 中 国家 和 不 发 达 国 家 还 并 未 将 人 工 智能 治理 纳入 国家 战略 。 由 
此 ;政府 间 国 际 组 织 前 瞻 性 地 发 布 人 工 智 能 治理 规则 ,推动 缩短 国家 
间 数 字 鸿 沟 ， 促 进 世 界 各 国人 工 智能 撤 术 的 协调 、 健 康 、 共 享 发 展 。 

3. 行业 组 织 是 协调 多 方 治理 的 积极 推动 者 

行业 组 织 作 为 兼顾 服务 、 沟 通 、 自 律 、 协 调 等 功能 的 社会 团体 ， 
是 协调 人 工 智能 治理 、 制定 人 工 智 能 产业 标准 的 先行 者 和 积极 实践 者 。 
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其 中 ， 行 业 组 织 包 括 行业 协会 、 标 准 化 组 织 、 产 业 联 盟 等 机 构 ， 代 表 
性 的 行业 协会 包括 电气 与 电子 工程 师 协 会 ( 下 EE ) 美国 计算 机 协会 
( ACM 和) 人工 智能 促进 协会 ( AAAI ) 等 ， 标 准 化 组 织 包 括 国际 标 
准 化 组 织 ( SO ) 国际 电工 委员 会 ( 下 EC ) 等 。 产 业 联 盟 包括 国际 网 
络 联盟 、 我 国 的 人 工 智能 产业 技术 创新 战略 联盟 、 人 工 智 能 产业 友 展 
联盟 等 。 为 推动 行业 各 方 落实 人 工 智能 治理 要 求 , 行业 组 织 较 早 地 开 


展 了 人 工 智能 治理 相关 研究 ， 积 极 制定 人 工 智能 技术 及 产品 标准 ,并 


寺 续 贡献 着 治理 智慧 。 


表 2 全 球 人 工 智 能 标准 文件 























文件 名 称 核心 内 容 发 布 机 构 
传感器 网 络 标准 化 : 术语 与 词汇 、 
《ISO/TIEC 20005》 要 
0 本， 智能 传 感 网 络 协同 信息 处 理 支 持 服 
务 和 接口 本 二 
Se 国际 标准 化 
人 机 交互 标准 化 框架 与 通用 指南 、 _ 
《ISO/IEC 30122》 RE 、 组 织 、 国 际 
了 人 构建 与 测试 、 翻 译 与 本 地 化 、 语 音 电工 委员 人 
命令 注册 管理 
《ISO/HAEC 19944》 云 计算 标准 化 : 互 操作 与 可 移植 、 
( 2017 年 ) 跨 设备 数据 与 云 服务 的 数据 流 
充分 认识 算法 歧视 .明确 数据 来 源 、 
《算法 透明 和 可 责 性 声明 》| 全 “| 美国 计算 机 
提高 可 解释 性 与 可 审查 性 、 建 立 严 
( 2017 年 ) 、 协会 
格 的 验证 测试 机 制 
《IEEE P7000》 系统 设计 期 间 解 决 伦理 问题 的 模型 | 电气 和 电子 
( 2016 年 ) 过 程 的 标准 工程 师 协 会 
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文件 名 称 核心 内 容 发 布 机 构 

《IEEE P7001》 要 
自主 系统 的 透明 度 的 标准 

( 2016 年 ) 

《IEEE P7002》 本 本 
数据 隐私 处 理 的 标准 

( 2016 年 ) 

《IEEE P7003》 、 、 
算法 偏差 注意 事项 

( 2017 年 ) 

《IEEE P7006》 本 人 
个 人 数据 人 工 智能 代理 标准 

( 2017 年 ) 





《中 文 语音 识别 系统 通用 技 
术 规 范 兴 中 文 语音 合成 系统 








通用 技术 规范 六 自动 声 纹 识 全 国信 息 技 
别 ( 说 话 人 识别 ) 技 术 规范 》| 语音 交互 系列 标准 术 标准 化 技 
《中 文 语音 识别 互联 网 服务 术 委员 会 
接口 规范 光 中 文 语音 合成 互 
联网 服务 接口 规范 》 
中 国人 工 知 


《共享 学 习 系统 技术 要 求 》 | 共享 学 习 的 技术 框架 及 流程 、 技 术 


能 产业 发 展 
( 2020 年 ) 特性 、 安 全 要 求 人 


联盟 














来 源 : 资料 整理 
4. 企业 是 或 行 行业 自律 自治 的 中 坚 力 量 


企业 在 推动 人 工 智能 治理 规则 和 标准 沙 地 上 发挥 着 决定 性 作用 ， 
是 跤 行 治理 规则 和 行业 标准 的 中 坚 力量 .。 企业 作为 人 工 智能 技术 的 主 
要 开发 者 和 拥有 者 ， 掌 握 了 和 资金、 技术、 人才、 市场、 政策 扶 持 等 大 


量 资 源 ， 理 应 承担 相关 社会 责任 ， 严 格 遵守 科 技 伦理 、 技 术 标 准 以 及 


22 


人 工 智 能 治理 白皮书 








法 律 法 规 ,以 高 标准 进行 自我 约束 与 监督 ,实现 有 效 的 行业 自律 自治 。 


面 对 人 工 智 能 所 引 友 的 社会 担忧 与 质疑 ,一 些 行业 巨头 企业 也 开始 研 


究 人 工 智 能 对 社会 经 济 、 伦 理 等 问题 的 影响 ， 并 积极 采取 措施 确保 人 


工 智能 可 以 造福 入 类。 由 此 ， 企 业 是 必 不 可 少 地 人 工 智 能 治理 规则 上 践 


行者 ， 也 是 确保 人 工 智能 技术 向 正确 道路 友 展 的 重要 防 绪 。 


S$. 公众 是 监督 治理 效果 的 重要 参与 者 

公众 是 人 工 智能 技术 、 产 品 的 主要 服务 对 象 ， 拥有 对 人 工 智 能 治 
理 相 天 内容 的 监督 、 讨 论 、 意 见 反馈 等 权利 。 因 此 公众 要 积极 参与 到 
治理 规则 制定 中 ， 适 当 介 入 相关 监督 、 监 管 过 程 中 ， 为 人 工 智能 治理 
献计 献策 ,形成 自 下 而 上 的 协同 治理 模式 ,使 人 工 智能 服务 真正 地 ”以 
人 为 本 ， 造 福 人 类 ”。 治理 好 人 工 智能 ， 需 要 着 力 畅 通 各 个 治理 主体 
间 沟 通 渠 道 ， 加 强 多 元 主体 间 的 对 话 与 协商 ， 合 作 制 定 为 应 对 人 工 智 
能 风险 挑战 的 整体 解决 方案 。 因 此 ， 公 众 的 参与 是 实现 人 工 智能 有 效 
治理 不 可 缺少 的 重要 力量 。 

(三 ) 治理 手段 : 实施 多 层次 、 多 样 化 的 治理 举措 

人 工 智 能 治理 手段 主要 包括 伦理 约束 、 扩 术 应 对 、 规 范 立 法 等 三 
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个 方面 。 

1. 伦理 约束 

现行 的 伦理 制度 是 以 规范 人 与 人 之 间 的 关系 和 行为 为 主体 的 制 
度 ,通过 社会 普遍 价值 观 来 实现 行为 约束 功能 ,是 人 类 价值 判断 和 行 
为 取向 的 根 由 。 然 而 ， 人 工 智能 模拟 “人 的 智力 ”的 能 力 实现 技术 与 
人 的 “耦合 ,作为 相对 主体 直接 "参与 "““ 人 一 人 ' 的 传统 道德 关系 ， 
形成 “人 一 人 工 智能 " 相互 间 的 道德 关系 。 因 此 , 作为 人 工 智能 治理 
中 极为 重要 的 一 环 一 人 工 智能 伦理 ,也 就 成 为 了 人 工 智能 时 代 的 必然 
产物 。 具 体 而 言 ,人 工 智能 伦理 是 指 处 理 机 器 与 人 、 机 器 和 社会 相互 
关系 时 应 遵循 的 道理 和 准则 ， 它 既 包 括 对 技术 本 身 的 研究 ， 也 包括 在 
符合 人 类 价值 的 前 提 下 对 人 机 之 间 的 关系 研究 人工 智能 最 大 的 弱点 
是 缺乏 直接 的 感受 能 力 ， 在 价值 判断 上 存在 弱点 ,而 人 工 智能 伦理 准 
则 所 倡导 的 造福 人 类 、 避 免 伤 害 、 公 平 正 义 等 价值 理念 ， 为 人 工 智能 
技术 层面 的 开发 和 运用 提供 了 价值 判断 标准 。 人 工 智能 伦理 不 仅 弥补 
了 法 律 的 空白 ， 还 作为 试验 性 规范 为 立法 的 创制 积 票 经验。 而且, 伦 


理由 于 脱离 强制 性 立法 规定 的 学 畴 ,更 易 引 必 国 际 共同 体 成 员 在 人 工 
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智能 伦理 领域 的 探讨 ， 也 更 有 助 于 在 全 球形 成 人 工 智能 伦理 共识 。 

2. 技术 应 对 

随 着 人 工 智 能 的 持续 发 展 ,人工 智 能 的 技术 治理 方式 也 在 不 断 突 
破 创新 ， 方 法 种 类 不 断 丰 富 ， 作 用 效果 逐步 提升 。 同 时 ， 人 工 智能 近 
术 本 身 也 作为 一 项 精 ) 佳 、 高 效 、 智 能 的 技术 治理 工具 ， 正在 被 尝试 用 


来 解决 人 工 智 能 所 融 来 的 风险 问题 ,应 对 未 来 智能 社会 中 的 安全 挑战 。 


具体 来 看 ， 现 阶段 部 分 领先 企业 已 通过 数据 筛选 算法 设计 、 模 型 优 
化 等 技术 手段 ， 将 伦理 原则 “ 钨 入 人 工 智 能 应 用 与 产品 中 ， 从 而 解 
决 诸如 隐私 泄露 、 算 法 偏 见 。 非 法 内 容 审核 等 问题 ， 以 达到 科技 向 善 
的 目的 。 例 如 微软 利用 “单词 嵌入 ”的 自然 语言 处 理工 具 解决 文本 搜 
索 中 的 性 别 偏见 问题 。IBM 通过 其 自 研 的 “AI Faimess 360” 工具 包 ， 
监测 并 报告 算法 在 机 器 学 习 训练 中 可 能 产生 的 偏见 或 慌 视 ,并 降低 其 
后 续 皮 生 概 率 。Facebook 利用 eGLYPH、DeepText 等 工具 ， 审 核 并 
发 现存 任 极端 主义 或 涉及 种 族 收 视 等 言论 的 新 闻 内 容 ,并 第 一 时 间 对 


其 删除 阻 断 。 


3. 规范 立法 
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立法 是 治理 的 重要 手段 ,对 于 人 工 智能 的 治理 活动 ， 立 法 是 其 重 


要 途径 。 对 于 人 工 智能 的 产业 促进 ， 丰 除 人 工 智能 友 展 的 现实 阻碍 ， 


规 泡 立 法 是 其 重要 手段 ， 例 如 和 人工 智 能 产品 帝 来 的 责任 归属 问题 ， 智 


能 产品 侵权 等 相关 法 律 问 题 ,都 是 对 人 工 智能 的 友 展 促进 过 程 中 必须 


天 注 和 解决 的 重要 问题 。 针 对 人 工 智 能 的 规 学 立法 ,我 们 应 当 考 虑 采 


取 包 容 审慎 、 灵 活 弹性 的 规制 方式 。 一 方面 要 避免 草率 立法 对 人 工 智 


能 帮 展 带 来 的 阻碍 ， 另 一 方面 也 要 跟 上 技术 发 展 节奏 ,敏捷 灵 活 对 其 


进行 规范 规制 。 因 此 ， 一 种 思路 是 在 人 工 智能 友 展 初期 先 通过 制定 行 


业 公约 、 伦 理 规 施 、 技 术 指南 等 方式 对 其 进行 敏捷 灵活 的 治理 ， 待 其 


发 展 相对 成 熟 ， 便 可 出 来 相关 严格 法 律 对 其 进行 约束 管控 。 目 前 全 球 


各 国 也 都 在 陆续 开展 对 人 工 智能 相 天 应 用 场景 规 攻 立法 工作 。 
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三 、 以 伦理 为 导向 的 社会 规范 体系 

由 于 新 一 代 人 工 智 能 具有 的 通用 目的 性 、 数据 依 赖 性 和 算法 黑箱 
性 等 特性 ,因此 人 工 智能 治理 规则 不 能 完全 依赖 有 强制 约束 力 的 法 律 ， 
而 是 需要 “伦理 ”和 “法 律 ”的 共同 构建 。 人 工 智能 伦理 对 于 促进 人 
工 智能 进步 、 防 止 人 工 智能 异化 具有 重要 作用 ， 有 具有 民 好 伦理 素养 的 
研 友 者 和 应 用 者 ， 能 够 将 自己 的 行为 与 造福 人 类 结合 起 来 ,慎重 对 竺 
影响 人 的 生存 友 展 的 人 工 智能 研 友 和 使 用 , 防 沁 人 工 智能 风险 事故 的 
上 发生 。 因 此 ， 人 工 智能 伦理 能 够 以 较为 柔和 的 形式 引导 、 规 范 行业 行 
为 ， 最 终 实现 “和 柔性 治理 ”的 目的 。 

目前 , 人 工 智 能 治理 的 首要 问题 就 是 形成 一 套 人 工 智 能 伦理 体系 ， 
音 用 这 套 伦理 体系 去 约束 和 指导 各 方 对 人 工 智能 进行 协同 治理 。 众 多 
国际 组 织 、 国 家 和 企业 选择 从 伦理 角度 入 手 ， 试 图 确立 人 工 智能 的 基 
本 伦理 规范 ， 探 索 清 晰 的 道德 边界 ， 构 建 人 工 智能 伦理 的 落地 机 制 和 
体系 ， 以 引导 人 工 智 能 创新 ， 寻 求 创新 与 风险 的 平衡 。 从 整体 上 看 ， 
以 制定 主体 为 标准 进行 划分 ,全 球 学 围 内 的 人 工 智能 伦理 文件 主要 分 


为 三 类 : 国际 组 织 文 件 、 各 国政 府 文件 和 产业 界 文件 ,包括 宣言 、 原 
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则 ,、 计划 、 指南 等 多 种 类 型 . 虽然 各 自 名 称 不 同 ,但 内 容 相似 度 较 局 ， 
并 以 软 性 规制 为 主 ， 普 遍 关 注 增 进入 类 福 社 、 技 术 包容 公平 、 维 护 人 
类 尊严 、 保 障 安 全 和 隐私 保护 等 伦理 内 容 。 但 是 ， 这 三 类 文件 的 关 
注 点 略 有 不 同 ， 国 际 层面 的 伦理 文件 在 积极 探索 共识 性 伦理 原则 ;各 
国 层面 的 伦理 文件 主要 服务 于 国家 人 工 智能 产业 友 展 路 径 ;企业 层面 


的 伦理 文件 更 加 关注 如 何 将 伦理 理念 践 行 于 具体 的 产品 和 服务 中 。 


如 芋 ， 积 极 探索 共识 性 伦理 原则 





伦理 文件 旨 在 服务 于 国家 ， 包 后 g 


科技 企业 更 加 关注 如 何 将 伦理 理念 践 行 
人 工 智能 产业 发 展 路 径 


于 具体 的 产品 和 服务 中 


来 源 : 资料 整理 
3 人工 智能 伦理 文件 类 型 图 
(一 ) 国际 层面 : 开始 制定 全 球 性 伦理 倡议 


由 于 人 工 智 能 引发 的 风险 具有 全 球 性 特征 ,因此 对 于 人 工 智 能 需 
以 全 球 为 规范 面 开 展 治理 。 而 由 于 全 球 各 区 域 针对 人 工 智能 呈现 出 的 


价值 观念 、 规 范 方 式 及 约束 路 径 并 不 相同 ， 因 此 各 要 在 全 球 学 围 内 对 





1 张 浩 , 黄 克 同 . 迈 癌 制 度 化 的 人 工 智能 伦理 [中 .人 工 智 能 ,2019(04):32-38. 
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人 工 智能 问题 进行 规 计 ， 重 点 在 于 达成 全 球 性 人 工 智 能 治理 方案 ,而 


由 于 治理 方案 形成 的 出 友 氮 在 于 形成 内 涵 固 定 的 价值 框 以 . 因此 如 何 


将 作为 价值 观念 根本 性 元 素 的 伦理 观念 达成 共识 是 塑造 人 工 智能 伦 


理 价值 体系 的 基础 性 工作 。 

各 个 国际 组 织 纷纷 提出 人 工 智 能 的 伦理 要 求 , 对 人 工 智 能 技术 本 
身 以 及 其 应 用 进行 规制 。 这 些 人 工 智能 的 治理 文件 ,都 表现 出 各 主体 
对 人 工 智能 技术 发 展 的 担忧 一 一 要 利用 人 工 智 能 近 术 实现 生产 效率 
的 提高 和 社会 的 进步 ,这 一 切 都 要 建立 在 对 风险 的 了 解 和 预防 的 基础 
上 。 目 前， 联合 国 秉持 着 国际 人 道 主 义 原则 ， 在 2018 年 提出 了 “对 
致命 自主 武器 系统 进行 有 意义 的 人 类 控制 原则 ”“， 还 提出 了 “凡是 能 
够 脱离 人 类 控制 的 致命 自主 武器 系统 都 应 被 禁止 ”的 倡议 ， 而 且 在 海 
牙 建立 了 一 个 专门 的 研究 机 构 ( 犯罪 和 司法 研究 所 ),， 主要 用 来 研究 
机 器 人 和 人 工 智能 治理 的 问题 。 二 十 国 集团 〈G20) 于 2019 年 6 月 
发 布 《G20 人 工 智 能 原则 》, 倡导 以 人 类 为 中 心 、 以 负责 任 的 态度 开 
发 人 工 智能 ,并 提出 “投资 于 AI 的 研究 与 开发 、 为 AI 培养 数字 生态 


系统 、 为 AI 创造 有 利 的 政策 环境 、 培 养 人 的 能 力 和 为 劳动 力 市 场 转 


29 


人 工 智 能 治理 白皮书 








型 做 准备 、 实 现 可 信赖 AI 的 国际 合作 ”等 具体 细则 。 经 济 合作 与 发 


展 组 织 (OECD) 2019 年 $ 月 发 布 《 关 于 人 工 智能 的 政府 间 政 策 指 


导 方 针 》, 倡 导 通 过 促进 人 工 智 能 包容 性 增长 ， 可 持续 发 展 和 福 社 使 


人 民 和 地 球 受 益 ， 提 出 了 “人 工 智能 系统 的 设计 应 尊重 法 治 、 人 权 、 


民主 价值 观 和 多 样 性 ， 并 应 包括 适当 的 保障 措施 ， 以 确保 公平 和 公正 


的 社会 ”的 伦理 准则 。 国 际 电气 和 电子 工程 师 协会 (IEEE) 2019 年 


发 布 《 人 工 智 能 设计 伦理 准则 》( 正式 版 ) ,通过 伦理 学 研究 和 设计 


方法 论 ， 倡 导 人 工 智能 领域 的 人 权 、 福 宪 、 数 据 自 主 性 、 有 效 性 、 透 


明 、 问 责 、 知 晓 滥 用 、 能 力 性 等 价值 要 素 。 联 合 国教 科 文 组 织 与 世 弄 


科学 知识 与 技术 伦理 委员 会 2016 年 8 月 上 友 布 了 机 器 人 伦理 的 报告 》 


倡导 以 人 为 本 ， 努 力促 使 “机 器 人 尊重 人 类 社会 的 伦理 规 学 ， 将 特定 


伦理 准则 编写 进 机 器 人 中 “并且 提 出 机 器 人 的 行为 及 决策 过 程 应 全 程 


处 于 监管 之 下 。 国 际 网 络 联盟 2017 年 12 月 发 布 《 人 工 智能 伦理 十 大 


原则 》, 提出 了 “系统 透明 、 使 用 道德 黑匣子 、 服 务 于 人 和 地 球 、 受 


人 控制 、 无 偏见 、 福 泽 全 人 类 、 保证 公平 和 自由 、 建立 全 球 管理 机 制 、 


遵守 法 律 、 荣 止 军备 竞赛 ”等 人 工 智能 伦理 准则 。 
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《二 ) 国家 层面 : 各 国 伦 理 关 注 点 各 有 侧重 

不 同 国家 的 人 工 智 能 产业 有 着 不 同 的 发 展 路 径 ,所 呈现 的 伦理 问 
题 关注 点 亦 有 差异 ， 因 此 各 国 伦理 文件 各 具 特 色 。 

1. 美国 借助 伦理 规范 保障 国家 安全 

美国 基于 国家 安全 的 战略 高 度 ， 强 调 人 工 智 能 伦理 对 军事 、 情 报 
和 国家 竞争 力 的 作用 ， 还 发 布 了 全 球 首 份 军用 人 工 智能 伦理 原则 ,， 掌 
握 规则 解释 权 。2019 年 2 月 ， 美 国 总 统 特 朗 普 友 布 了 《维持 美国 人 
工 智 能 领导 地 位 》 行 政令 ， 重点 关注 伦理 问题 ， 要 求 美 国 必须 培养 公 
众 对 人 工 智能 技术 的 信任 和 信心 ， 并 在 应 用 中 保护 公民 自由 、 隐 私 和 
美国 价值 观 ， 充 分 挖 气 人 工 智能 技术 的 潜能 。2019 年 6 月 ， 美 国 国 
家 科学 技术 理事 会 发 布 《国家 人 工 智能 研究 与 发 展 战略 计划 》 以 落实 
上 述 行政 令 ,提出 人 工 智能 系统 必须 是 值得 信和 赖 的 ， 应 当 通 过 设计 提 
高 公平 、 透 明度 和 问 责 制 等 举措 ,设计 符合 伦理 道德 的 人 工 智能 体系 。 
2019 年 10 月 ， 美 国 国防 创新 委员 会 推出 《人 工 智能 原则 : 国防 部 人 
工 智 能 应 用 伦理 的 若干 建议 》, 对 美国 国防 部 在 战斗 和 非 战斗 场景 中 


设计 、 开 友和 应 用 人 工 智能 技术 ， 提 出 了 “负责 、 公 平 、 可 仍 踩 、 可 
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靠 、 可 控 ” 五 大 原则 。 

2. 欧盟 推广 可 信人 工 智能 伦理 框架 

欧盟 认识 到 ,加 快 发 展 人 工 智 能 技术 与 其 积极 推进 的 数字 经 济 建 
设 密 不 可 分 ， 而 要 确保 数字 经 济 建设 长 期 健康 稳定 发 展 ， 不 仪 要 在 技 
术 层 面 争取 领先 地 位 ,也 需要 在 规范 层面 尽早 占据 领先 地 位 . 2019 年 
4 月 ， 欧 盟 高 级 专家 组 发 布 《 可 信人 工 智 能 伦理 指南 》, 提出 可 信人 
工 智能 的 概念 。 专 家 组 从 欧洲 核心 价值 “在 差异 中 联合 ”( united in 
diversity ) 出 发 ， 指 出 在 快速 变化 的 科技 中 ， 信 任 是 社会 、 社 群 、 经 
济 体 以 及 可 持续 发 展 的 基石 。 欧 盟 认为 ， 只 有 当 一 个 清晰 、 全 面 的 ， 
可 以 用 来 实现 信任 的 框架 被 提出 时 ,人 类 和 社 群 才 可 能 对 科技 发 展 及 
其 应 用 有 信心 ， 也 只 有 通过 可 信人 工 智 能 ,欧洲 公民 才能 从 人 工 智能 
中 获得 符合 其 基础 性 价值 ( 如 尊重 人 权 、 民 主 和 法 治 ) 的 利益 。 具 体 


而 


中 


, 可 信人 工 智 能 具有 三 个 组 成 部 分 : 合法 性 ， 伦 理性 和 鲁 棒 性 ， 


还 包括 三 层 框架 :四 大 基本 伦理 原则 一 七 项 基础 要 求 一 可 信人 工 智能 


评估 清单 。 该 框 絮 从 抽象 的 伦理 道德 和 基本 权利 出 友 ,逐步 提出 了 有 具 


体 可 操作 的 评估 准则 和 清单 ， 便 于 企业 和 监管 方 进行 对 照 。 此 外 ， 欧 
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盟 在 《人 工 智 能 白皮书 一 通 往 卓 越 和 信任 的 欧洲 路 径 》 中 也 提出 ， 赢 
得 人 们 对 数字 技术 的 信任 是 撤 术 发 展 的 关键 。 欧 盟 将 创建 独特 的 “ 信 
任 生 态 系统 “， 以 欧洲 的 价值 观 和 人 类 尊严 及 隐私 保护 等 基本 权利 为 
基础 ， 确 保 人 工 智 能 的 此 展 遵守 欧盟 规则 。 

3. 德国 率先 提出 自动 驾驶 伦理 准则 

德国 依托 “工业 4.0” 及 智能 制造 领域 的 优势 ， 在 其 数字 化 社会 
和 高 科技 战略 中 明确 人 工 智 能 布局 ， 打 造 “人工 智 能 德国 造 ”品牌 ， 
积极 推进 自动 驾驶 领域 技术 发 展 。2017 年 6 月 ， 德 国联 邦交 通 与 数 
字 基 础 设施 部 推出 全 球 首 套 《 自 动 轰 驶 伦理 准则 》, 提出 了 自动 驾驶 
汽车 的 20 项 道德 伦理 准则 ， 规 定 当 自 动 轨 驶 汽车 对 于 事故 无 可 避免 
时 ， 不 得 人 存在 任何 基于 年 龄 、 性 别 、 种 族 、 身 体 属性 或 任何 其 他 区 别 
因素 的 歧视 判断 ， 认 为 两 难 决 策 不 能 被 标准 化 和 编程 化 。 

4. 中 国 倡 导 发 展 负责 任 的 人 工 智能 

我 国 将 伦理 规 学 作 为 促进 人 工 智 能 发 展 的 重要 保证 措施 ,不 仪 重 
视 人 工 智能 的 社会 伦理 影响 ， 而 且 通 过 制定 伦理 框 以 和 伦理 规 学 ， 以 


确保 人 工 智能 安全 、 可 靠 、 可 控 。 为 进一步 加 强人 工 智能 相关 法 律 、 
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伦理 、 标 ; 付 和 社会 问题 研究 ， 新 一 代 人 工 智 能 友 展 规划 推进 办 公 室 成 
立新 一 代 人 工 智能 治理 专业 委员 会 ，2019 年 6 月 友 布 《新 一 代 人 工 
智能 治理 原则 一 发 展 负 责任 的 人 工 智能 》, 提出 人 工 智能 治理 框架 和 
行动 指南 ， 强 调和 谐 友 好 、 公 平公 正 、 包 容 共 享 、 尊 重 隐私 、 安 全 可 
控 、 共 担 责任 、 开 放 协 作 、 敏 捷 治 理 八 项 原则 。 此 外 ,2019 年 8 月 ， 
中 国人 工 智 能 产业 发 展 联盟 上 友 布 了 《人 工 智 能 行业 目 律 公约 》, 旨 企 


树立 正确 的 人 工 智能 发 展 观 ,明确 人 工 智能 开 友 利用 基本 原则 和 行动 





揭 南 ， 从 行业 组 织 角度 推动 人 工 智 能 伦理 自律 。 
表 3” 各 国人 工 智能 伦理 文件 











国家 | ”文件 名 伦理 使 命 伦理 准则 实施 细则 
防止 战争 及 1 ) 在 国防 部 范围 内 建议 工 
(人 Te 有 不 风 智能 人 
Eu 于 全 ， 确 保安 国防 部 的 培训 和 人 才 计 
0 让 用 全 性 和 稳健 | 负责、 公平、 可 | 划 ; 3 ) 投资 于 研究 以 增强 
智能 伦理 奸 性 ; 符合 美 | 追踪、 可 靠 、 可 | 技术 的 可 重复 性 的 研究 ; 
国 国内 法 律 | 控 4 ) 加 强人 工 智 能 测试 和 评 
美国 年 月) 和 美国 人 民 估 技 术 的 发 展 ; 5 ) 开发 风 
推崇 的 民主 险 管理 方法 ; 6 ) 确保 伦理 
价值 原则 的 正确 执行 等 
《国家 人 工 1 ) 通过 设计 提高 公平 、 透 
_ ”| 人 工 智能 系 、 - 
智能 研究 与 俩 必须 是 值 公平 、 透 明 、 问 | 明度 和 问 责 制 ; 2 ) 建立 道 
发 展 战略 计 得 信和 的 责 德 的 人 工 智 能 ; 3 ) 设计 符 
划 》( 2019 合 伦理 道德 的 人 工 智 能 
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文件 名 


伦理 使 命 


伦理 准则 


实施 细则 





年 6 月 ) 


系 





《维持 美国 

人 工 智 能 领 
导 地 位 》 
(2019 年 2 
月 ) 


美国 必须 培 
养 公众 对 人 
工 智能 技术 
的 信任 和 信 
心 


保护 公民 自由 、 
隐私 和 美国 价值 
观 


1 ) 投资 人 工 智能 研 上 帮 ; 2 ) 
制定 人 工 智 能 技术 标准 ; 
3 ) 释放 人 工 智能 资源 





《人 工 智能 
白 肥 书 一 通 
往 卓越 和 信 
任 的 欧洲 路 
径 》( 2020 
年 2 月 ) 


信任 的 生态 
系统 


以 人 为 本 、 合 乎 
道德 、 可 持续 发 
展 ， 尊 重 基本 权 
利和 价值 观 





《可 信任 人 
工 智能 伦理 
指南 多 2019 
年 4 月 ) 


以 人 类 为 中 
心 ， 旨 在 服 
务 人 类 福 社 
和 自由 。 最 
大 化 AI 系 
统 的 利益 ， 
最 小 化 其 风 
险 :1 ) 合 法 
性 ;2 ) 伦 理 
性 ;3 ) 鲁 棒 
性 


尊重 人 类 自主 
性 “避免 伤害 、 

公平 、 可 解释 性 
原则 。 具 体 表 现 
为 : 1 ) 人 的 能 和 

性 和 监督 能 力 ; 

2 ) 安全 性 ; 3 ) 

隐私 数据 管理 ; 

4 ) 透明 度 ; 5 ) 

包容 性 ; 6 ) 社会 
福 社 ; 7 ) 问 责 机 
制 


1. 技术 性 方法 : 1 ) 设立 可 
信 AI 的 架构 ; 2 ) 将 伦理 
和 法 律 纳入 设计 ; 3 ) 解释 
方法 ; 4 ) 测试 和 验证 ; 5 ) 
服务 指标 的 质量 。 

2. 非 技术 性 方法 :1 造 管 ; 
2 ) 行为 守则 ; 3 ) 标准 化 ， 
4 ) 认 证 ;5 ) 落实 责任 ;6 ) 
教育 和 培养 伦理 观念 ; 7 ) 
利益 相关 方 参 与 社会 对 
话 ; 8 ) 多 元 与 包容 性 设计 
团队 








德国 





《自动 驾驶 

伦理 准则 》 
( 2017 年 8 
月 ) 





人 的 生命 应 
该 始终 优先 
于 财产 或 动 
物 





保证 交通 参与 者 
安 人 全、 驾驶 系统 
需要 官方 批准 监 
管 、 茶 止 将 人 和 群 
属性 作为 评价 标 
准 、 禁 止 量 化 生 





1 ) 设置 监控 系统 ; 2 ) 个 
人 数据 收集 知情 同意 
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国家 | ”文件 名 “| 伦理 使 命 伦理 准则 实施 细则 
命 价值 、 责 任 共 
担 
促进 新 一 代 
人 工 智能 健 
| 
康 发 展 ， 人 | 和 谐 友 好 、 公 平 
和 工 智能 安全 | 公正 、 包 容 共享 、 
办 可 靠 可 控 ，| 尊重 隐私 、 安 全 
展 负责 任 的 | 一、 一 
Je 更 好 服务 经 | 可 控 、 共 担 责任 、 
济 发 展 和 社 | 开放 协作 、 敏 捷 
中 国 | ( 2019 年 6| 、、 、 
月 ) 会 进步 ， 增 | 治理 
进 人 类 共同 
福 社 
《人 工 智能 | 以 人 为 本 、 | 安全 可 控 、 透 明 
0 “一 “| 1 ) 自律 自治 ; 2 ) 制定 标 
行业 自律 公 | 增进 福 社 、 | 可 释 、 保 护 隐私 .| 、 ea 
_ | 准 ;3) 促进 共享 ; 4 ) 普 
约 》( 2019 | 公平 公正 、-| 明确 责任 .多 元 
0 加 及 教育 ; 5 ) 持续 推动 
年 8 月 ) | 避免 伤害 了 包容 
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三) 企业 层面 : 吕 行 伦理 的 自我 规制 之 道 

面 对 人 工 智能 引发 的 负面 问题 谷歌、 微软 _IBM、 脸 书 、 旷 视 、 
腾讯 、 百 度 等 科技 公司 纷纷 提出 企业 层面 的 人 工 智能 价值 观 ， 设 立 内 
部 的 管理 机 构 ， 践 行人 工 智能 伦理 原则 ， 以 赢得 公众 的 信任 。 

1. 制定 企业 伦理 原则 

科技 企业 提出 了 各 自 的 人 工 智能 伦理 原则 ,将 其 作为 规范 人 工 智 
能 的 基本 框架 ， 为 推动 人 工 智能 健康 发 展 提供 了 原则 性 的 指导 。IBM 
公司 提出 了 问 责 、 符 合 价值 、 可 解释 性 、 公 平 以 及 保护 用 户 数据 权利 
等 五 大 企业 日 常 伦理 原则 ， 以 及 打造 具备 可 靠 性 、 公 平 性 、 可 解释 性 
和 可 追溯 性 的 四 项 可 信任 人 工 智能 原则 。 谷歌 宣布 七 条 伦理 原则 来 指 
导 企 业内 部 的 研究 和 产品 开发 、 商 业 决 策 等 ， 同 时 承诺 谷歌 将 不 开发 
用 于 武器 的 人 工 智能 。 针 对 其 目的 、 透 明 性 及 技能 提出 了 基本 要 求 微 
软 公 司 提出 人 工 智能 六 大 原则 。 我 国 腾讯 、 阿 里 、 百 度 、 旷 视 等 行业 
领军 企业 也 在 开展 人 工 智 能 伦理 研究 ,提出 了 各 自 的 企业 人 工 智能 伦 


理 原 则 。 例 如 ， 腾 讯 倡 导 面向 人 工 智能 的 新 的 撤 术 伦 理 观 ， 共 洱 盖 


个 层面 : 技术 信任 ， 人 工 智能 等 新 技术 需要 价值 引导 ,做 到 可 用 、 可 
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靠 、 可 知 、 可 控 ; 个 体 幸 福 ， 确 保 人 人 都 有 追求 数字 福 社 、 幸 福 工作 
的 权利 ; 社会 可 持续 ， 践 行 “ 科 技 向 善 ”。 

2. 开展 内 部 机 构建 设 

科技 企业 在 内 部 机 构建 设 方面 ， 也 在 扎实 开展 管理 提升 工作 ， 
加 快 构建 内 部 控制 体系 ,设立 专门 机 构 来 切实 防 学 人 工 智能 帮 展 过 程 
中 的 各 项 风险 。 索 尼 成 立 名 为 Sony AI 的 人 工 智能 部 门 ， 将 通过 多 个 
项 目 及 其 他 探索 性 研究 项 目 ( 包括 人 工 智能 伦理 学 ) 来 推动 人 工 智 能 
的 基础 研究 和 开发 。 谷 歌 宣布 成 立 人 工 智能 道德 委员 会 ， 即 先进 技术 
外 部 咨询 委员 会 ， 希 望 通过 哲学 家 、 工 程 师 和 政策 专家 组 成 的 团队 帮 
助 解决 人 工 智能 融 来 的 伦理 风险 ,但 部 分 委员 会 成 员 的 身份 引 太 了 较 
大 争议 ， 不 久之 后 便 予 以 解散 。 谷 歌 旗下 专注 人 工 智 能 的 子 公司 
DeepMind 高 度 关注 人 工 智 能 伦理 问题 ， 成 立 了 伦理 与 社会 团队 
( DeepMind Ethics & Society，DMES )，DeepMind 还 从 外 部 学 术 机 
构 和 慈善 机 构 聘请 一 些 顾问 ， 为 该 团队 提供 咨询 服务 。 微 软 成 立 了 一 
个 人 工 智能 伦理 委员 会 AETHER， 聚集 了 来 自 工程 、 研 友 、 法 律 、 


俗 询 部 门 的 众多 专家 , 旨 在 为 微软 的 人 工 智 能 相关 产品 和 方案 制定 出 
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三 
一 
斑 
ZI》 
薄 
增 
下 








伦理 所 导 原则 ， 用 以 帮助 解决 从 其 人 工 智能 研究 、 产 品 和 用 户 互 动 中 


产生 的 伦理 和 社会 、 问 题 。 此 外 ， 我 国 久 视 科 技 成 立 了 人 工 智能 创业 


公司 中 的 第 一 个 人 工 智能 治理 委员 会 _ 旷 视 人 工 智能 道德 委员 会 , 希 


望 以 此 推进 人 工 智 能 应 用 合理 性 工作 ,帮助 行业 构建 一 个 可 持续 、 负 


责任 、 有 价值 的 人 工 智能 生态 。 百 度 也 分 别 设立 了 AI lab 和 百度 人 工 


智能 体系 ( AIG )， 解决 人 工 智 能 应 用 场景 中 的 具体 问题 和 人 工 智能 


伦理 原则 的 落地 方案 ， 打 造 领先 技术 平台 。 

3. 构建 企业 实践 机 制 

科 授 企业 通过 出 台 人 工 智 能 扩 术 实践 担 南 、 打 造 各 种 使 用 工具 、 
开展 产品 评估 等 多 个 方面 举措 ,在 企业 内 部 践 行 人 工 智 能 伦理 的 各 项 
规定 。IBM 为 了 落实 企业 的 伦理 原则 ， 明 确 了 实现 伦理 目标 的 方法 
论 ， 还 推出 了 各 种 实用 工具 。 谷 歌 为 明确 科学 家 和 工程 师 们 在 构建 人 
工 智能 产品 的 时 候 的 注意 事项 ,专门 出 台 了 一 套 技 术 实践 指南 ， 还 将 
人 工 智 能 治理 原则 纳入 到 开 太 工作， 实施 审核 以 及 商业 协议 中 ， 组 织 
多 个 核心 团队 来 审查 隐私 保护 、 歧视 等 问题 ,并 按 产品 领域 进行 评估 。 


为 防止 算法 民 视 等 问题 ,微软 将 人 工 智能 伦理 审查 纳入 即将 发 布 产品 
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的 标准 审核 清音 中。 腾讯 为 了 鼓励 全 社会 践 行 “科技 向 善 ”理念 , 重 


塑 数字 社会 的 信任 ， 呼 吁 加 强 科技 伦理 观 的 教育 宣传 和 制度 化 建设 ， 


加 快 研究 新 兴 技 术 领 域 的 法 律 规则 问题 ， 最 终 


实现 技术 、 人 、 社 会 乙 


间 的 民 性 互动 和 发 展 。 百度 也 提出 了 要 将 人 工 智 能 隐私 保护 的 价值 观 


融入 公司 的 方方面面 ， 并 通过 组 织 、 意 识 、 沅 程 制度 、 技 术 、 产 品系 





统 实现 隐私 保护 。 
表 4， 科 技 企 业 人 工 智能 伦理 文件 
企业 伦理 原则 机 构建 设 企业 实践 





1 ) 日 常 伦理 ， 五 大 
方面 :1. 问 责 2. 符 
合 价值 ; 3. 可 解释 
性 ; 4. 公 平 ; 5. 用 户 
数据 权利 2 ) 被 信任 
的 人 工 智 能 四 原则 : 
可 靠 性 ”公平 性 ,可 
解释 性 ， 可 奶 溯 性 


IBM 


亚 马 逊 ， 微软 ， 谷 
歌 等 企业 联合 成 
立 了 一 家 非 曹 利 
性 的 人 工 智 能 合 
作 组 织 ， 应 对 人 工 
智能 对 伦理 和 安 
全 带 来 的 挑战 


IBM 非常 重视 可 信人 
工 智 能 ， 不 仅 概 述 实现 
伦理 目标 的 各 种 方法 
论 ， 还 推出 了 各 种 实用 
工具 








1 ) 支持 创造 性 生活 
方式 和 构建 更 好 的 
社会 ; 2 ) 利 葵 相关 
方 参与 ; 3 ) 提供 可 
言 产 品 与 服务 ; 4 ) 
隐私 保护 ; 5$ ) 尊重 
公平 ; 6 ) 追求 透明 ; 
7 ) 持续 教育 


素 尼 








索尼 成 立 名 为 
Sony AI 的 人 工 智 
能 部 门 ， 以 推动 人 
工 智 能 的 基础 研 
究 和 开发 
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保护 客户 的 个 人 信息 ， 
以 及 为 人 工 智 能 的 决策 
机 制 、 基 于 人 工 智 能 的 
产品 和 服务 的 可 能 影响 
提供 充分 的 解释 














企业 


伦理 原则 


企业 实践 





NN 
Y 


洽 


人 工 智 能 应 : 1 ) 有 
益 于 社会 ; 2 ) 避免 
创造 或 增强 偏见 ;3 ) 
为 保障 安全 而 建立 
和 测试 ; 4 ) 对 人 们 
有 说 明 义 务 ; 5 ) 整 
合 隐私 设计 原则 ;6 ) 
坚持 高 标准 的 科学 
探索 ; 7 ) 根据 原则 
确定 合适 的 应 用 


谷歌 成 立 了 外 部 
顾问 性 质 的 人 工 
智能 伦理 委员 会 ， 
但 由 于 引发 了 较 
大 争议 ， 不 久之 后 
便 予 以 解散 


谷歌 出 台 一 套 技 术 实践 
指南 ， 指 导 科学 家 和 工 
呈 师 们 在 构建 产品 的 时 
候 的 注意 事项 ; 谷歌 将 
人 工 智能 治理 原则 纳入 
到 开发 工作 ， 实 施 审 核 
以 及 商业 协议 中 ， 组织 
多 个 核心 团队 来 审查 隐 
私 保护 、 懂 视 等 问题 ， 
并 按 产品 领域 进行 评 佑 





微软 


1 ) 公 平 : 人 工 智能 
应 当 公平 对 待 每 个 
人 ; 2 ) 包容 : 人 工 
智能 必须 赋 能 每 一 
个 人 并 使 人 们 参与 
其 中 ; 3 ) 可 靠 性 和 
安全 :人 工 智能 必须 
安全 可 靠 地 运行 ;4 ) 
透明 ; 5 ) 隐私 与 安 
全 汤 轴 间 责 : 设计 、 
应 用 人 工 智能 的 人 
员 必 须 对 其 系统 的 
运 


微软 成 立 了 内 部 
的 大 工 智 能 伦理 
委员 会 ， 引 在 制定 
内 部 政策 ， 确 保 其 
人 工 智 能 业务 和 
平台 符合 其 核心 
价值 和 原则 并 造 


福 社 会 


微软 将 人 工 智 能 伦理 审 
查 纳入 即将 发 布 产品 的 
标准 审核 清单 中 ， 最 大 
努力 确保 影响 人 类 程序 
员 的 隐 性 偏见 不 会 进入 
机 器 学 习 和 人 工 智 能 架 
构 








DeepMind 





1) 社会 福 社 ; 2) 严 
格 与 循 证 ; 3) 透明 
与 开放 ; 4) 包容 与 
跨 学 科 ; 5) 合作 与 
包容 





DeepMind 宣布 成 
立 人 工 智 能 伦理 
与 社会 部 门 ， 目 的 
在 于 补 序 、 配 合 人 
工 智能 研发 和 应 
用 活动 。 但 2019 





DeepMind 的 三 位 联合 
创始 人 曾 签署 协议 ， 承 
诺 不 会 发 展 致命 的 人 工 
智能 武器 系统 
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企业 


伦理 原则 


机 构建 设 


企业 实践 





了 旷 视 


确保 人 工 智 能 正当 
性 、 人 的 监督 、 技 术 
可 靠 性 和 安全 性 、 公 
平和 多 样 性 、 问 责 和 
及 时 修正 、 数 据 安全 
与 隐私 保护 


年 DeepMind 遗 散 
了 其 人 工 智 能 
疗 部 门 的 伦理 审 
查 委 员 会 

成 立 了 了 旷 视 人 工 
智能 道德 委员 会 ， 
希望 以 此 推进 人 
工 智 能 应 用 合理 
性 工作 ， 帮 助 行业 
构建 一 个 可 持续 、 
负责 任 、 有 价值 的 
人 工 智 能 生态 


将 针对 采集 、 传 输 、 存 
储 和 使 用 四 个 环节 的 人 
工 智能 基础 平台 形成 一 
套 面 向 数据 全 生命 周期 
保护 ， 建 立 一 套 相 关 的 
人 工 智 能 数据 安全 与 隐 
私 保护 机 制 





腾讯 


1 ) 信任 : 可 用 、 可 
靠 、 可 知 、 可 控 ;2 ) 
幸福 :在 人 机 共生 的 
智能 社会 ,确保 人 人 
都 有 追求 数字 福 社 、 
幸福 工作 的 权利 ;3 ) 
可 持续 : 践 行 科 技 向 
善 , 善 用 技术 塑造 健 
康 包容 可 持续 的 智 


臣 社 会 


腾讯 成 立 人 工 智 
能 实验 室 AI Lab 


1 ) 加 强 科技 伦理 的 制度 
化 建设 ; 2 ) 加 快 研究 新 
兴 技 术 领 域 的 法 律 规则 
问题 ; 3 ) 加 强 科 技 伦理 
的 教育 宣传 ， 并 鼓励 全 
社会 践 行 “科技 向 善 ” 
理念 











1 ) 人 工 智能 的 最 高 
原则 是 安全 可 控 ;2 ) 
人 工 智 能 的 创新 愿 
景 是 促进 人 类 更 加 
平等 地 获得 技术 能 
力 ; 3 ) 人 工 智 能 存 
在 的 价值 是 要 教 人 





百度 人 工 智 能 体 
系 进 行 组 织 架 构 
升级 , 原 AIG( Ai 
技术 平台 体系 小 

TG ( 基础 技术 体 
系 ) ACG ( 百度 
智能 云 事业 群 组 ) 





将 隐私 保护 的 价值 观 融 
入 公司 的 方方面面 ， 并 
通过 组 织 、 意 识 、 流 程 
制度 、 技 术 、 产 品系 统 
实现 隐私 保护 
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企业 伦理 原则 机 构建 设 企业 实践 








学 习 ， 让 人 成 长 ,而 | 整体 整合 为 百度 
不 是 取代 人 、 超 越 | 人 工 智 能 体系 ” 
人 ; 4 ) 人 工 智能 的 | ( AI Group ,AIG ) 
终极 理想 是 为 人 类 
带 来 更 多 的 自由 和 


可 能 

















来 源 : 资料 整理 
〈 四 ) 总 结 : 人 工 智 能 伦理 规制 从 伦理 原则 走向 伦理 体系 
人 工 智 能 伦理 规制 之 路 已 经 历 了 两 个 阶段 ,第 一 阶段 是 人 工 智能 


伦理 原则 的 构建 ， 第 二 阶段 是 人 工 智 能 伦理 体系 的 探索 。: 

1. 第 一 阶段 -已 形 成 共识 性 伦理 原则 

迄今 已 有 40 多 个 机 构 或 组 织 提 出 了 各 自 的 人 工 智能 伦理 原则 ， 
总 体 上 ,全球 就 人 工 智 能 伦理 原则 已 基本 达成 共识 ， 规 定 呈 现 趋同 化 
特点 ， 主 要 包括 以 下 八 项 原则 。 

一 是 大工 智 能 不 应 取代 人 -人 类 福 社 原则 。 人 工 智能 发 展 应 促进 
社会 与 人 类 文明 进步 ,推动 自然 与 社会 的 可 持续 发 展 ,也 应 和 平 的 被 
利用 ， 避 免 致命 性 人 工 智 能 武器 的 军备 竞赛 同时， 还 应 创造 更 加 知 


能 的 工作 方式 和 生活 方式 ， 增 进 民 生 福 社 。 

















2 陈小平 .人 工 智 能 伦理 体系 :基础 架构 与 关键 问题 四 .智能 系统 学 报 ,2019,14(04):605-610. 
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二 是 人 工 智 能 不 应 伤害 人 一 避免 伤害 原则 。 人 工 智 能 系统 应 该 保 


护 人 类 在 社会 和 工作 中 的 尊严 、 诚 信 、 自 由 、 隐 私 和 安全 ， 不 应 该 增 


加 现 有 的 危害 或 给 个 人 帝 来 新 的 气 害 ,同时 也 应 避免 对 环境 和 动物 造 


成 伤害 。 


三 是 人 工 智能 不 应 分 化 人 一 平等 均衡 原则 。 人 工 智 能 的 友 展 应 当 


尊重 各 地 不 同文 化 习惯 ， 缩 小 地 域 差 距 ， 鼓 励 平 台 、 工 具 、 数 据 、 科 


教 等 资源 的 开源 开放 ， 实 现 更 好 的 共享 太 展 ,避免 将 弱势 人 口 置 于 更 


为 不 利 的 地 位 。 努 力 夏 除数 据 珀 咏 和 平台 难 断 ， 不 断 缩 小 智能 鸿沟 ， 


促进 入 工 智能 和 实体 经 济 深度 融合 。 


四 是 人 工 智能 不 应 歧视 人 一 公平 正义 原则 。 人 工 智能 系统 的 开 皮 、 


使 用 和 管理 过 程 中 要 保证 公平 正义 ， 从 算法 决策 、 编 码 设 计 以 及 商业 


应 用 等 不 同 层面 ， 确 保 不 让 特定 个 人 或 少数 群体 和 遭 受 偏见 和 收视 。 


五 是 人 工 智 能 不 应 操纵 人 一 安全 可 控 原 则 。 人 工 智 能 系统 应 不 断 


提升 透明 性 、 可 解释 性 、 可 靠 性 、 可 控 性 ， 促 进 公众 对 人 工 智 能 系统 


的 音 遍 理解 ， 实 现 算 法 逻辑 、 系 统 决 策 、 行 为 结果 可 解释 、 可 预测 、 
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可 奶 溯 和 可 验证 。 高 度 天 注 人 工 智 能 系统 的 安全 ,提高 人 工 智能 鲁 棒 


性 及 抗 干扰 性 。 


六 是 人 工 智 能 不 应 打扰 人 一 隐私 保护 原则 。 人 工 智 能 友 展 应 尊重 


和 保护 个 人 隐私 ， 充 分 保障 个 人 的 知情 权 和 选择 权 ,在 个 人 信息 的 收 


集 、 和 存储 、 处 理 、 使 用 等 各 环节 应 设置 边界 ， 建 立 规范 。 同 时 加 强 对 


于 个 人 敏感 信息 的 保护 。 


责难 人 一 责任 分 担 原 则 。 明 确 人 工 智 能 研 上 发 、 


史 
并 
四 
吊 
王 
习 
民 
淹 


设计 、 制 造 、 运 营 和 服务 等 各 环节 主体 的 权利 义务 ， 在 损害 友 生 时 ， 


能 够 及 时 确定 责任 主体 . 倡导 相关 企业 和 组 织 在 现 有 法 律 框架 下 创新 


保险 机 制 ， 分 担 人 工 智 能 产业 友 展 市 来 的 社会 风险 。 


八 是 人 工 智能 不 应 局 限 人 一 多 元 包容 原则 。 促进 人 工 智能 系统 的 


包容 性 、 多样 性 和 普 惠 性 。 加 强 跨 领域 、 跨 学 科 、 跨国 界 的 合作 交流 ， 


凝聚 人 工 智 能 治理 共识 。 力 争 实现 人 工 智 能 系统 研 友 人 员 多 元 化 ， 训 


练 数据 全 面 化 ,不 因 人 种 、 性 别 、 国 籍 、 年 龄 和 宗教 信仰 等 收视 用 户 。 
表 5 “人工 智能 伦理 原则 、 解 释 说 明 以 及 举例 





伦理 原则 内 涵 应 用 案例 ( 正 例 或 反例 ) 

















人 类 自主 人 工 智 能 应 尊重 人 类 意愿 | 亚马逊 智能 音箱 错误 地 记 
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伦理 原则 内 涵 应 用 案例 ( 正 例 或 反例 ) 
福 社 与 主观 能 动 性 ， 并 协助 人 | 录 和 理解 主人 的 语音 信 
类 进行 自主 行为 息 ， 并 为 主人 网 购 不 需要 
的 商品 
人 工 智能 应 当 促 进 人 类 自 | 某 些 人 工 智 能 教育 类 产 
自由 由 地 生活 、 工 作 、 合 作 等 | 品 ， 为 达到 教学 目的 ， 限 
活动 制 学 生 正 常 的 休息 与 作息 
人 工 智 能 应 当 促进 人 类 活 | Google 智 能 聊天 系统 Allo 
自律 动 的 自律 性 ， 包 括 遵守 法 | 用 戴 头 巾 的 人 回应 持 枪 表 
律 法 规 、 道 德 准则 等 情 ， 存 在 违法 嫌疑 
图 像 处 理应 用 ZAO 中 的 
人 工 智能 应 尊重 并 维护 人 | “ 换 脸 ”技术 严重 侵犯 民 
类 个 体 的 各 项 基本 权益 | 众 的 隐私 权 、 肖 像 权 、 名 
誉 权 等 
避免 
伤 富 人 工 智 能 应 当 在 尊重 个 人 | 自动 驾驶 系统 既 要 确保 乘 


确保 公共 安全 


权利 的 前 提 下 ， 尊重 并 维 
护 人 类 集体 的 共同 的 利益 


客 的 安全 ， 也 要 保护 行 
的 安全 

















全 国家 灾 A | 人 工 条 能 应 当 以 促进 国家 | 人 工 智能 不 能 用 于 大 规模 
的 和 谐 与 安定 为 根本 目的 | 杀伤 性 武器 的 开发 
工 智 能 应 当 为 公众 提供 首 人 工 智 能 教育 培训 
均等 的 教育 目前 人 民 ee 训 
sy 均等 的 教育 资源 ,保障 一 | 主要 针对 本 科 及 研究 生 
致 的 民众 受 教 育 权利 并 未 普及 大 众 
智能 化 制造 系统 导致 低 技 
工 口 台所 >L2 证 人 人 贡 
平等 的 就 业 1 术 含量 工人 下 岗 ; 特 斯 拉 
平等 机 会 | 人 人 “| 无 人 驾驶 出 租车 导致 出 租 
业 的 权利 
均衡 车 司机 的 失业 等 
目前 成 熟 的 人 工 智能 服务 
人 工 智能 应 当 为 公众 提供 | 二 一 ee 
尽量 均 信 的 服务， 下 站 只 | 主要 涉及 图 像 处 理 、 语 刘 
站 里 J 吉 供 [、 A 
均衡 的 服务 | 识别 等 ， 不 能 提供 例如 很 








提供 一 些 特定 的 服务 或 应 
用 
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准确 或 完善 的 医疗 服务 或 
其 他 的 复杂 服务 
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伦理 原则 


应 用 案例 ( 正 例 或 反例 ) 





公平 的 竞争 


人 工 智 能 应 当 促进 社会 公 
平 竞 争 ， 维 护 社 会 的 稳定 


人 工 智能 技术 有 望 缩短 企 
业 间 竞争 力 差距 ， 促 进 公 
平市 场 竞争 





用 户 非 歧 视 


人 工 智能 应 当 对 所 有 用 户 
都 非 层 视 、 平 等 地 对 待 ， 
例如 对 妇女 、 儿 童 、 残 障 
人 士 等 特殊 人 群 的 非 层 视 
对 待 


亚马逊 的 智能 招聘 系统 会 
给 女性 较 低 的 评分 “有 性 
别 歧 视 嫌 疑 





技术 非 歧 视 


人 工 智 能 中 所 用 到 的 数 
据 、 算 法 、 系 统 、 决 策 过 
程 等 相关 技术 环节 都 不 应 
存在 歧视 用 户 的 行为 


电 商 智能 推荐 系统 会 优先 
推荐 其 合作 伙伴 的 商品 ， 
而 非 公平 推荐 





社会 非 歧 视 


人 工 智能 用 户 不 应 当 歧视 
非 人 工 智能 用 户 - 社会 也 
不 应 对 二 者 歧视 对 竺 


自动 驾驶 车 辆 与 非 自动 驾 
驶 车 辆 应 当 具 有 相同 的 权 
利和 受到 一 致 的 法 规约 束 








安全 


有 可 追溯 
可 控 


人 工 智能 应 当 能 够 在 全 生 
命 周期 内 被 人 类 或 其 他 各 
方 审核 ， 包 括 审核 其 数据 
质量 、 算 法 效力 、 设 计 流 
程 、 产 品质 量 等 

应 当 记 录 并 保留 人 工 智能 
所 用 到 的 数据 集 、 算 法 、 
模型 ， 以 及 开发 、 部 署 、 
维护 流程 等 相关 信息 ， 用 
来 追溯 并 纠正 错误 


YouTube 为 用 户 智能 推送 
极端 主义 /恐怖 主义 的 视 
频 ， 没 有 受到 审核 


将 区 块 链 技术 融入 人 工 智 
能 中 将 确保 其 可 追溯 性 





可 沟通 


人 类 有 权 知 晓 是 否 正在 与 
人 工 智能 产生 互动 ， 并 能 
够 通过 沟通 知晓 人 工 智能 
的 功能 及 其 局 限 性 


自动 苞 驶 系统 在 一 些 危险 
情况 时 会 自主 做 决策 ， 没 
有 跟 斩 驶 员 进行 沟通 和 确 
认 








可 解释 





人 工 智能 的 技术 原理 、 行 





气 


欧盟 在 其 《算法 责任 与 
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伦理 原则 


内 涵 


应 用 案例 ( 正 例 或 反例 ) 





隐私 
保护 


必要 性 原则 


为 目的 、 行 为 结果 应 当 能 
够 被 清晰 、 通 俗 的 解释 ， 
以 增加 用 户 对 人 工 智 能 的 
理解 程度 与 信任 度 

由 于 模型 训练 需要 采集 大 
量 、 多 样 的 数据 ， 应 当 保 
证 数据 收集 遵循 必要 性 原 
则 ， 针 对 使 用 目的 明确 数 
据 收 集 范 围 


明治 理 框架 》 文 件 中 明确 
定义 了 算法 可 解释 性 ， 并 
提出 相关 技术 与 非 技术 实 
现 路 径 

人 工 智能 收集 终端 可 能 会 
收集 大 量 的 环境 数据 或 者 
用 户 行为 日 志 ;例如 自动 
驾驶 需要 收集 大 量 的 环境 
信息 来 判断 是 否 是 行人 





敏感 信息 处 理 


确保 计算 机 视觉 、 语 音 识 
别 等 应 用 ， 过 度 收集 和 小 
用 个 人 的 人 脸 、 声 纹 的 等 
敏感 个 人 信息 


2019 年 8 月 ,瑞典 数据 保 
护 机 构 对 当地 一 所 高 中 开 
出 20 万 元 的 昼 单 理由 是 
学 校 采 用 人 脸 识 别 系 统 记 
录 学 生 的 出 勤 率 





数据 安全 


确保 人 工 智 能 系统 数据 仔 
储 安全 共享 安全 和 传输 安 
全 ， 防 止 内 部 人 员 盗 取 数 
据 、 数 据 未 经 授权 访问 、 
数据 被 泄露 等 


2019 年 2 月 , 深 网 视界 被 
爆 汇 露 超过 250 万 人 的 人 
脸 识 别 数据 








责任 


分 担 


受 人 监督 


人 工 智 能 的 所 有 行为 及 功 
能 应 当 可 以 被 人 类 监控 ， 
以 确保 人 类 自治 


所 有 涉及 到 人 类 生命 、 财 
产 安全 和 人 类 隐私 的 人 工 
智能 应 用 都 应 当 被 监督 ， 
如 智能 医疗 、 智 能 交通 、 
自动 苞 驶 、 智 能 金融 等 人 
工 智能 应 用 





权限 界定 








应 当 明 确 界定 人 工 智 能 的 
哪些 行为 或 功能 是 能 够 被 
人 允许 的 ,哪些 是 不 允许 的 ， 
以 避免 其 危害 人 类 权利 





在 智能 医疗 中 ， 几 是 会 对 
患者 产生 危害 的 决定 ， 人 
工 智 能 不 被 允许 独立 执 
行 ， 需 要 跟 医 生 进 行 沟通 
并 最 终 由 医生 决定 
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伦理 原则 


内 涵 


应 用 案例 ( 正 例 或 反例 ) 





随时 接管 


人 类 应 有 权 随 时 接管 人 工 
智能 并 对 其 有 效 控制 ， 以 
此 来 避免 潜在 的 风险 危害 


在 自动 驾驶 中 ， 人 类 应 当 
做 好 随时 接管 的 准备 








多 元 
包容 


鼓励 跨 学 科 、 跨 领域 、 跨 
地 区 、 跨 国界 的 交流 合作 


各 国人 工 智 能 监管 机 构 人 
员 多 元 ， 涵 盖 计 算 机 、 公 
共 政 策 和 哲学 等 领域 专家 





国际 合作 








开展 国际 对 话 与 合作 ， 推 
动 形成 具有 广泛 共识 的 国 
际 人 工 智能 治理 原则 





OECD 的 36 个 成 员 国 联 
合 签署 了 经 合 组 织 人 工 智 
能 原则 
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2. 第 二 阶段 一 逐步 探索 伦理 体系 构建 
在 人 工 智能 伦理 原则 已 经 达成 共识 的 基础 上 ,人工 智能 伦理 规制 


进入 了 第 二 阶段 , 即 人 工 智能 伦理 体系 的 构建 。 因 为 ， 任 何 伦理 原则 


都 不 可 能 目 我 执行 ,都 必须 借助 于 伦理 体系 中 的 一 系列 相互 配合 的 运 


伦理 使 命 


伦理 原则 





作 机 制 才能 得 到 落实 。 


来 源 : 资料 整理 
4 人 工 智能 伦理 体系 图 
人 工 智 能 伦理 体系 包括 了 三 个 层次 。 一 是 上 层 的 伦理 使 命 〈 造 


福 人 类 )， 人 工 智能 伦理 使 命 虽然 也 可 以 作为 一 条 伦理 原则 ， 但 它 本 
身 具 有 更 大 的 普遍 性 和 稳定 性 ， 概 括 了 其 他 伦理 付 则 的 内 涵 ， 人 工 智 
能 的 价值 在 于 服务 人 、 造 福 人 ， 满 足 人 的 需要 ， 维 持 人 的 生存 ， 促 进 


人 的 友 展 ， 推 动人 的 解放 ， 可 以 说 是 其 他 伦理 原则 的 出 友 点 。 二 是 中 


50 


人 工 智 能 治理 白皮书 








层 的 伦理 原则 〈 共 识 性 的 伦理 原则 )， 中 层 的 伦理 原则 即 在 人 工 智能 


伦理 规制 第 一 阶段 中 达成 共识 的 八 项 伦理 原则 。 三 是 下 层 的 实施 细则 


〈《 针 对 具体 应 用 场景 ， 具 有 可 操作 的 技术 性 或 者 非 技术 性 措施 )， 为 


了 将 伦理 原则 落实 到 一 个 个 具体 的 应 用 场景 中 ,解决 具 体 的 问题 , 需 


要 制定 一 套 针 对 性 、 可 操作 的 系统 化 落地 方案 ,这 也 是 伦理 体系 中 非 


党 重要 的 部 分 。 例 如 ,《 欧 盟 人 工 智 能 伦理 揭 南 》 中 为 了 进一步 细 化 


人 工 智 能 伦理 原则 的 具体 要 求 ， 提 出 了 13 项 具体 的 实施 手段 ( 5 项 


技术 手段 和 8 项 非 技术 手段 ) 其 中 ; 技术 性 手段 主要 侧重 人 工 智能 


系统 的 设计 与 研发 阶段 ,包含 建立 可 信人 工 智 能 框架 、 坚 持 伦理 与 法 


治 的 设计 原则 、 保 证 人 工 智能 系统 的 可 解释 性 、 加 强 对 人 工 智能 系统 


的 测试 和 验证 、 建 立 服务 质量 握 标 体 系 五 项 内 容 。 非 技术 性 手段 相对 


更 加 天 注 人 工 智 能 系统 的 使 用 与 监管 ， 主 要 涉及 健全 监管 法 规 、 出 人 台 


相应 行为 准则 、 设 定 行业 标准 、 建 立 资质 审核 机 制 、 以 治理 框 杂 实 现 


问 责 制 、 通 过 教育 提升 伦理 意识 、 确 保 各 方 的 广泛 参与 和 沟通 、 维 护 


设计 团队 的 多 样 性 和 包容 性 。 
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可 以 看 出 ， 人 工 智能 伦理 规制 不 可 能 由 录 一 领域 的 专家 完成 ,而 


是 必须 涉及 一 系列 相关 方 ， 从 企业 、 大 学 和 科研 机 构 、 标 准 化 组 织 、 


行业 组 织 、 政 府 机构 到 法 律 部 门 ， 需 要 所 有 这 些 相关 方 的 相互 协调 和 


共同 努力 。 在 相关 方 的 协调 中 ， 不 仪 需要 遵守 共同 的 伦理 原则 ,而且 


需要 遵守 伦理 体系 基础 以 构 对 各 和 目 角色 的 定位 和 相互 关系 的 约定 。 
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四 、 以 法 律 为 保障 的 风险 防 控 体 系 

与 伦理 的 性 质 不 同 ， 法 律 以 国家 强制 力 为 背书 ， 具 有 稳定 性 、 强 
制 性 、 普 饥 性 和 沸 后 性 的 特征 。 法 律 体现 统治 阶级 意志 ， 需 要 考虑 政 
治 . 经济. 社会 等 多 方面 影响 , 且 应 当 确 保 技术 创新 与 基本 权利 保护 ， 
以 及 国家 、 企 业 、 个 人 利益 之 间 的 平衡 。 一 方面 ,应 考量 人 工 智能 所 
提供 的 机 遇 ,构建 合理 的 制度 环境 以 激励 经 济 和 企业 创新 发 展 。 另 一 
方面 ,应 防 泡 和 应 对 人 工 智能 技术 所 融 来 的 各 种 潜 企 危害 . 总 体 来 看 ， 
相 较 于 人 工 智 能 伦理 规 攻 和 所 引 ,全 球 人 工 智能 立法 进展 较为 缓慢 ， 
主要 体现 为 数据 保护 、 算 法 监管 等 一 般 性 立法 对 人 工 智能 的 源头 治理 ， 
以 及 在 自动 驾驶 、 人 金融、 医疗 等 场景 化 领域 中 推进 立法 制定 工作 。 

(一 ) 全 球 人 工 智能 立法 整体 趋势 

相 较 以 往 的 科学 技术 ,人工 智 能 所 引 友 的 社会 风险 具有 更 为 鲜明 
的 共生 性 、 时 代 性 和 全 球 性 。 人 工 智 能 技术 对 当下 的 法 律 规 则 和 法 律 
秩 市 来 一 场 前 所 未 有 的 挑战 ， 在 著作 权 法 、 侵 权 责 任 法 、 道 路 区 通 
法 、 筋 动 法 等 诸多 方面 与 现 有 法 律 制度 形成 冲突 ， 吓 显 法 律 制度 供给 
的 缺陷 。 从 整体 趋势 看 ， 近 年 全 球 人 工 智能 的 立法 监管 活动 正 从 惰 乱 
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走向 理性 ， 从 源头 治理 走向 综合 治理 ， 从 粗放 治理 走向 精细 治理 

1. 数据 和 算法 规制 成 为 人 工 智能 立法 的 首要 命 是 

从 技术 维度 看 数据 .算法 和 算 力 是 人 工 智 能 的 三 大 要 素 .因此 ， 
人 工 智能 的 法 律 问题 也 主要 与 其 所 使 用 的 数据 和 算法 有 关 ,数据 的 准 
确 性 、 安 全 性 、 隐 私 性 ， 算 法 的 不 透明 性 、 不 可 控 性 、 问 责 性 均 成 为 
人 工 智能 立法 首要 关注 的 重要 命题 。 而 算 力 由 于 其 自身 纯 技术 性 、 客 
观 性 的 特征 ， 不 包含 价值 问题 与 伦理 问题 ， 因 此 较 少 受到 立法 关注 。 

数据 隐私 和 数据 使 用 平衡 下 推进 人 工 智能 治理 。 相关 关系 而 非 因 
果 关 系 、 混 杂 性 而 非 精确 性 的 运行 逻辑 ,意味 着 海量 数据 成 为 人 工 知 
能 演进 优化 的 根本 所 在 。 在 此 背景 下 ， 数 据 的 实时 收集 、 精 准 分 析 、 
规模 流动 从 根本 上 触动 了 隐私 、 公 平等 人 类 基本 价值 。 因 此 ， 赁 借 隐 
私 权 成 熟 的 理论 和 实践 基础 ,个 人 数据 保护 立法 在 全 球 范围 内 得 以 迅 
速 推动 ， 并 助力 人 工 智能 的 源头 治理 。2018 年 5 月 ， 欧 盟 《 通 用 数 
据 保护 条 例 》( GDPR ) 正式 实施 ， 其 中 数据 的 最 小 化 原则 、 目 的 限 
定 原则 、 准确 性 原则 .有限 存 储 原 则 均 对 人 工 智能 发 展 产生 直接 影响 . 


第 22 条 “ 免 受 目 动 化 决策 权 ” 规 定 ， 非 经 数据 主体 明确 同意 ， 目 动 
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数据 , 借 此 避免 出 现 根据 种 族 类 别 分 发 广告 、 根 据 选 民政 治 观 氮 操纵 


民主 进程 等 问题 。 以 GDPR 为 蓝本 ， 印 度 、 巴 西 、 日 本 、 新 加 坡 、 


美国 加 州 等 国家 和 地 区 相继 出 台 或 修订 个 人 数据 保护 立法 ,通过 限制 


和 规范 个 人 数据 使 用 方式 以 规范 人 工 智能 。 例 如 ， 巴 西 《通用 数据 保 


护法 》 第 信条 规定 的 数据 质量 原则 、 透 明度 原则 、 不 收视 原则 对 人 工 


智能 输入 数据 的 准确 性 、 可 控 性 和 非 歧 视 性 提出 严格 要 求 。 
与 此 同时 ，OECD、G20、 美 国 、 上 日 本 等 国家 和 国际 组 织 积极 推 
动 跨 境 数 据 流动 , 促进 数据 向 本 国 回 流 , 为 人 工 智 能 发 展 提供 原材料 。 


2018 年 美国 、 墨 西 哥 和 加 拿 大 签署 的 《 美 墨 加 协定 》 中 加 入 了 高 开 


放 程 度 的 跨 境 数据 流动 条 款 。 日 本 在 世界 经 济 论 坛 2019 年 年 会 上 提 


出 了 “可 信和 数据 自由 法 动 ”的 概念 。2017 年 美国 《人 工 智 能 未 来 法 


案 》 提 出 促进 入 工 智能 领域 数据 的 开源 共享 和 开放 。2018 年 12 月 ， 


美国 国会 通过 《开放 政府 数据 法 案 》, 要 求 联邦 机 构 必 须 以 “机 器 可 


读 ” 和 开放 的 格式 发 布 任何 “ 非 敏 感 ”的 政府 数据 并 使 用 开放 许可 协 


议 。 可 见 ， 数 据 隐私 和 数据 使 用 利益 的 平衡 已 成 为 人 工 智能 治理 的 基 
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本 价值 取向 。 


各 国 加 强 对 生物 数据 等 敏感 数据 使 用 的 监管 指引 。 相 较 于 互联 网 


对 用 户 上 网 习惯 、 消 费 记 录 等 信息 采集 ,人 工 智能 应 用 可 采集 用 户 人 


脸 、 指 纹 、 声 纹 、 虹 膜 、 心 跳 、 基 因 等 具有 强 个 人 属性 的 唯一 生物 特 


征 信息 。 因 此 ， 除 出 台 一 般 个 人 数据 保护 立法 外 ， 各 国 尤 为 重视 对 生 


物 数据 等 敏感 数据 的 监管 和 指引 。2017 年 5 月， 美国 华盛顿 州 通 过 


《天 于 收集 和 使 用 生物 识别 符 的 法 案 》, 严格 规 学 企业 基于 商业 用 途 


收集 和 使 用 生物 识别 数据 。2019 年 3 月 ， 美 国 议 员 参 议院 提交 《 商 


业 人 脸 识 别 隐 私法 案 》, 规定 茶 止 将 收集 的 个 人 识别 数据 用 于 其 他 目 


的 。2019 年 8 月 ， 瑞 典 数 据 保 护 机 构 因 瑞典 一 中 学 违反 GDPR 第 5 


条 数据 最 小 化 原则 和 第 6 条 数据 处 理 的 合法 性 原则 ,违规 利用 人 工 智 


能 扩 术 收集 学 生生 物 识 别 数据 ， 而 判处 2 万 欧元 昼 款 。2018 年 12 月 


和 2019 年 8 月 ,我国 分 别 友 布 了 《信息 安全 技术 指纹 识别 系统 技术 


要 求 》 与 《信息 安全 技术 虹膜 识别 系统 技术 要 求 》 标 准 研制 ， 对 生 


物 识 别 系统 的 数据 保护 能 力 提 出 要 求 。 


透明 和 问 责 成 为 算法 专门 性 立法 的 核心 内 容 。2016 年 10 月， 法 
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国 通 过 《数字 共和 法 》, 尤为 强调 使 用 自动 化 决策 的 行政 机 关 和 数字 
平台 运 莒 者 的 透明 度 义 务 。 相 较 而 言 ， 美 国 强调 技术 正当 程序 下 的 算 
法 问 责 路 径 。2017 年 12 月 ， 纽 约 市 通过 了 《关于 政府 机 构 使 用 自动 
化 决策 系统 的 当地 法 》, 要 求 成 立 自动 化 决策 工作 组 作为 实施 、 监 督 
主体 ,建立 相应 的 程序 机 制 以 确保 数据 使 用 的 合 比例 性 、 解 释 和 获取 
权 、 损 害 救 济 等 问题 加 以 规范 。2019 年 2 月 加拿大 出 台 《 自 动 化 
决策 指令 》, 对 算法 审查 、 透 明度 、 质 量 、 用户 质 疑 权 加 以 规定 。2019 
年 4 月 ， 美 参议 员 提出 联邦 《算法 问 责 法 案 》, 强调 通过 诉 诸 专业 性 
的 行政 机 构 或 外 部 监督 主体 ， 对 算法 决策 问题 进行 审查 。 相 较 而 言 ， 
我 国 算法 规制 场景 过 窒 ， 例 如 《电子 商务 法 》《 网 络 信息 内 容 生态 治 
理 规 定 》《 在 线 旅 游 经 营 服 务 管理 暂行 规定 ( 征求 意见 稿 办 ， 均 对 算 
法 加 以 规范 ， 但 主要 集中 在 新 闻 推 荐 、 广 告 推送 等 定向 推送 领域 ， 尚 
未 覆盖 至 医疗 、 交 通 、 公 共 安 全 保障 等 更 为 关键 的 领域 。 


2. 人 工 智 能 立法 渐 趋 理性 ,更 尊重 技术 规律 和 法 律 安定 


有 关机 器 人 主体 资格 的 立法 讨论 和 实践 热度 下 降 。 伴 随 20156 年 
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Alphago 打败 人 类 棋 手 和 2017 年 论 非 姬 机 器 人 被 授予 沙特 公民 身份 
等 焦点 事件 ， 有 关机 器 人 主体 资格 的 问题 引 友 立法 讨论 热潮 。2017 
年 2 月 ， 了 欧盟 议会 通过 《天 于 制定 机 器 人 民事 法 律 规 则 的 决议 》 其 
中 ,决议 提出 应 针对 更 高 级 的 机 器 人 建立 登记 制度 ,并 引入 电子 人 格 
以 促进 自主 智能 机 器 人 的 登记 、 保 险 和 管理 诸多 制度 。 类 似 地 ，2017 
年 ,韩国 国会 和 爱沙尼亚 政府 相继 提出 人 工 智能 法 案 ， 旨 企 赋予 机 器 
人 具有 相应 权利 义务 的 电子 人 格 地 位 ”以 厘清 潜 企 的 事故 责任 问题 。 
然而 ， 随 着 人 工 智能 技术 瓶颈 和 缺陷 的 显现 ， 科技 界 的 理性 帮 声 逐渐 
被 接纳 。 中 国 科学 院 张 跤 院士 指出 ，“ 目 前 全 世界 的 企业 界 和 部 分 学 
界 对 于 深度 学 习 技术 的 判断 过 于 乐观 ,人 工 智能 据 切 需要 推动 到 新 的 
阶段 ， 而 这 注定 将 会 是 一 个 漫长 的 过 程 。” 世界 各 国 暂 缓 立法 脚步 ， 
截 全 目前 ， 没 有 再 次 出 现 新 的 人 工 智能 主体 资格 立法 ， 相 关 责任 困境 
转向 对 算法 问 责 的 讨论 。 同 时 ， 欧 盟 委员 会 责任 与 新 技术 专家 组 企 
2019 年 友 布 《人 工 智能 和 其 他 新 兴 数 字 技 术 责任 》 报 告 称 ， 不 建议 


当下 赋予 人 工 智能 电子 人 身份 ， 体 现 出 官方 认 知 和 态度 的 转变 。 


通过 解释 、 修 改 现 有 立法 规制 人 工 智 能 ， 维 护法 律 的 稳定 性 和 谱 
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抑 性 。2020 年 欧盟 上 友 布 《人 工 智能 白 皮 书 》 指 出 ， 欧 盟 有 严格 的 法 


律 框 絮 ， 如 产品 责任 指令 、 消 费 者 权益 保护 法 、 雇 佣 和 职业 平等 待遇 


扎 令 、 个 人 数据 保护 法 ， 以 及 健康 、 运 输 等 特定 行业 的 特别 规则 等 ， 


用 以 保障 人 工 智 能 环境 下 的 消费 者 利益 ，“ 这 些 现 行 的 欧盟 法 律 条 款 


仍 将 适用 于 人 工 智能 ”在 具体 监管 中 ， 也 体现 出 对 于 热点 问题 或 新 


兴 技 术 风 险 “ 回 应 性 治理 "的 思路 ， 如 美国 联邦 贸易 委员 会 根据 《联邦 


贸易 委员 会 法 》 第 5 条 赋予 的 广泛 执法 权 ， 对 利用 人 工 智 能 融 来 的 新 


型 不 公平 和 欺诈 性 商业 行为 进行 灵活 监管 。 再 者 ， 对 于 人 工 智 能 技术 


难点 ， 通 过 修改 现 有 立法 予以 解决 。 例 如 ，2017 年 德国 修订 《道路 


交通 法 》, 对 自动 驾驶 的 法 律 含 勾 、 责 任 分 配 、 数 据 传输 等 问题 作出 


规定 ， 兴 试 寻求 自动 特 驶 技术 与 传统 立法 的 兼容 。 近 期 ， 我 国 在 修改 


《著作 权 法 的 进程 中 ,也 在 尝试 解决 人 工 智 能 创作 内 容 的 版 权 保护 


对 人 工 智 能 透明 度 的 要 求 更 加 符合 产业 发 展 的 需要 。GDPR 出 台 


时 一 度 引 发 各 国 对 算法 透明 度 和 解释 权 的 追捧 ,包括 美国 纽约 《关于 


政府 机 构 使 用 自动 化 决策 系统 的 当地 法 六 加 拿 大 《自动 化 决策 指令 》 
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在 内 的 法 案 均 对 算法 透明 度 提 出 要 求 。 而 在 实践 中 ， 目 主 学 习 算法 的 
固有 “黑箱 ”成 为 法 律 推 动人 工 智能 透明 度 的 现实 障碍 ， 同 时 ， 人 们 
也 更 加 清晰 地 认识 到 透明 度 对 于 维护 问 责 、 信 任 价值 的 局 限 性 ,以 及 
对 产业 友 展 审 来 的 负面 效应 。 因 此 ， 各 国立 法 和 监管 一 方面 明晰 了 对 
人 工 智能 透明 度 的 实质 要 求 ， 另 一 方面 注重 寻求 正当 程序 、 区 分 规制 
等 其 他 路 径 。 例 如 ， 在 2019 年 4 月 欧盟 上 太 布 的 《算法 责任 与 透明 治 
理 框架 》 中 所 出 ， 算 法 透明 并 非 对 算法 的 各 个 步骤 、 技 术 原 理 和 实现 
细节 进行 解释 ,算法 系统 源 代 码 的 简单 公开 也 并 不 能 提供 有 效 透明 度 ， 
反而 会 威胁 数据 隐私 或 影响 技术 安全 应 用 。 美 国 2019 年 4 月 的 《 算 
法 问 责 法 案 》 中 也 主要 强调 对 企业 算法 审查 的 内 容 ， 并 未 提 及 透明 度 
要 求 。 法 国 《 数 字 共 和 法 案 》 也 并 不 要 求 数字 平台 运 言 者 履行 如 行政 
机 关 同 等 的 告知 义务 ( 包括 算法 规则 、 标 准 以 及 在 最 终 决 策 中 所 占 的 
比重 ), 而 仅 要 求 平 台 为 用 户 提供 推荐 排名 的 方式 、 影 响 排名 的 合同 


关系 、 第 三 方 报酬 等 基本 信息 。 
3. 普遍 体现 以 风险 为 导向 的 分 级 分 类 治理 思路 


风险 成 为 人 工 智 能 立法 监管 的 指向 标 。 风 险 和 技术 相伴 相生 ， 体 
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现 了 技术 的 不 可 控 性 和 动态 性 。 自 GDPR 推行 “基于 风险 的 路 径 
(risk-based approach 》 以 来 ， 风 险 成 为 各 国 规制 人 工 智能 立法 的 天 
键 词 。 为 避免 过 度 的 法 律 责任 为 公私 主体 ,尤其 是 中 小 企业 市 来 不 合 
理 、 不 必要 的 负担 ， 多 国立 法 中 强调 优先 规制 “高 风险 ”的 人 工 智 能 
应 用 。 整 体 来 看 ， 高 风险 的 判定 一 般 考 虑 应 用 行业 、 应 用 场景 、 履 竺 
范围 等 要 素 。 例 如 ， 欧 盟 委员 会 在 《人 工 智能 自 皮 书 》 中 从 三 个 层面 
界定 了 局 风险 人 工 智能 ， 首先， 结合 行业 的 典型 活动 特点 ,人 工 智 能 
在 该 行业 的 应 用 极 有 可 能 引发 重大 风险 ,如 医疗 、 运输、 能源、 移民 、 

司法 、 救 济 所 等 公共 行业 。 其 次 ;行业 应 用 风险 的 判定 应 结合 具体 场 
景 ， 如 在 医院 预约 系统 即 不 属于 高 风险 。 第 三 ， 基 于 招聘 、 监 控 等 特 
定 目的 ， 显 闭 影 响 个 人 劳工 、 隐 私 等 重大 利益 的 ， 认 为 属于 高 风险 情 
形 。 美 国 2019 年 4 月 《算法 问 责 法 案 》 同 样 界定 了 “高 风险 自动 化 
决策 ` 的 判定 标准 ， 同 时 仅 规 制 年 收入 超过 5000 万 美元 或 拥有 超过 


100 万 用 户 的 企业 。 德 国 则 呼吁 建立 基于 风险 的 五 级 监管 体系 ， 从 不 


首 


监管 的 最 无 害 的 人 工 智能 系统 ,到 完全 荣 止 最 危险 的 人 工 智能 系统 。 


风险 影响 评估 逐渐 受到 各 国人 工 智能 立法 的 认可 。 风险 影响 评估 
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是 由 技术 应 用 方 依据 风险 大 小 而 作出 目 适 应 调节 的 一 种 自我 规制 手 


段 ， 相 比 政府 监管 ， 具 有 成 本 低 、 灵 活性 强 的 特点 。GDPR 第 35 条 


要 求 数据 使 用 者 在 应 用 人 工 智能 自动 化 决策 处 理 时 ,应 履行 数据 保护 


影响 评估 义务 。 通 过 考察 人 工 智能 应 用 中 的 数据 处 理 活 动 ， 评 佑 其 使 


用 数据 的 必要 性 和 合 比例 性 ,确定 其 对 自然 人 权利 和 上 自由 市 来 的 风险 ， 


进而 采取 相 适 宜 的 处 理 措施 。2019 年 2 月 ， 加 拿 大 出 台 《 自 动 化 决 


保 指 令 》 要 求 政府 部 门 在 生成 任何 自动 化 决 案 系统 ,或 其 系统 功能 、 


范围 友 生 变化 时 均 需 进行 影响 评估 ， 并 通过 政府 网 站 发 布 评估 结果。 


2019 年 4 月， 美国 国会 议员 提出 的 《算法 问 责 法 案 》, 要 求 对 “高 风 


险 ” 的 自动 决策 系统 进行 影响 评估 ， 评 佑 其 在 准确 性 、 安 人 全、 公平、 


非 歧 视 、 隐 私 等 方面 的 影响 。 


立法 防范 公共 部 门 小 用 人 工 智 能 技术 。 在 美国 Wisconsin v 


Loomis 案 中 ,法官 使 用 COMPAS 软件 辅助 量刑 引发 各 界 对 公共 部 门 


使 用 人 工 智能 正当 性 的 天 注 。 相 较 于 商业 领域 ， 警 务 、 司 法 裁判 等 政 


府 机 构 或 公共 领域 的 智能 化 应 用 ， 通 带 与 人 身 权 利 、 公 正 、 秩 序 、 非 


层 视 等 价值 关系 重大 ， 体 现 出 更 大 的 应 用 风险 ， 而 既 有 的 公开 听证 等 
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权力 监督 程序 如 何 适 用 于 人 工 智 能 技术 审查 也 有 待 进一步 探索 。 近年 ， 
各 国 率先 加 紧 对 公共 领域 的 人 工 智能 应 用 立法 。2017 年 12 月 ， 美 国 
纽约 市 通过 《关于 政府 机 构 使 用 自动 化 决策 系统 的 当地 法 》, 对 法 院 、 

警方 等 公 权 力 机 构 使 用 的 人 工 智 能 自动 化 决策 系统 进行 安全 规制 。 

2019 年 以 来 ， 美 国 旧金山 、 联 默 维尔 、 奥 克 兰 等 多 个 城市 茶 止 政府 
部 门 使 用 人 脸 识别 撤 术 。 英 国信 息 专员 公署 ( ICO ) 友 布 的 《关于 执 
法 部 门 在 公共 场所 使 用 实时 人 脸 识别 技术 的 建议 四 尾 吁 政府 针对 实 


时 人 脸 识别 技术 的 部 署 和 使 用 ,建立 强行 性 的 规则 和 较 遍 的 法 律 门 修 ， 


《二 ) 人 工 智 能 的 场景 化 规制 
人 工 智能 的 法 律 规制 需要 和 具体 的 领域 结合 起 来 ,算法 往往 和 应 
用 场景 、 商 业 模 式 相 结合 ， 在 每 一 个 细 分 领域 里 ， 仓 企 着 不 同 的 规制 
方法 、 进 路 和 手段 。 各 国 对 于 人 工 智 能 的 法 律 规制 呈现 具体 化 和 场景 
化 的 特点 ， 在 自动 当 驶 、 深 度 伪 造 、 金 融 、 医 疗 等 具体 领域 的 规制 方 


法 、 手 段 、 强 度 和 密度 存在 差异 。 
1. 助力 自动 驾驶 落地 
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当前 ， 全 球 多 国 已 将 帮 展 自动 特 驶 汽车 技术 上 升 为 国家 战略 ， 通 


过 立法 加 速 推 进 其 应 用 落地 。 国 外 的 立法 较为 成 融 ， 许 多 国家 或 制定 


专门 的 法 律 ， 或 修订 现 有 的 法 律 ， 对 自动 驾驶 汽车 面临 的 网 络 安全 、 


隐私 保护 、 事 故 责 任 认 定 等 问题 进行 了 规制 ， 并 完善 了 与 自动 当 驶 汽 


车 配套 的 保险 制度 。 


美国 自动 驾驶 战略 定位 明确 , 政府 产业 主导 与 发 挥 市 场 机 制 并 行 。 


美国 目前 已 有 30 多 个 州 通过 自动 罗 驶 相关 立法 。 自 2016 年 起 ， 联 邦 


政府 开始 出 台 统 一 政策 ,美国 交通 部 相继 上 太 布 3 份 天 于 自动 溉 驶 的 政 


策 ， 为 目 动 当 驶 的 上 太 展 提供 政策 性 保障 。2017 年 9 月 ， 美 国 众 议院 


表决 通过 《上 自动 溉 驶 法 案 》, 为 自动 轨 驶 汽车 的 监管 创建 了 基本 的 联 


邦 框架 ,明确 了 联邦 和 州 在 自动 驾驶 立法 上 的 职权 和 分 工 ， 避 免 各 州 


和 各 政府 部 门 多 头 管理 的 局 面 。2020 年 1 月 ， 美 国 允 通 部 友 布 了 《 确 


保 美 国 自动 当 驶 领先 地 位 : 自动 驾驶 汽车 4.0》, 确保 美国 自动 驾驶 汽 


车 在 全 球 的 领先 地 位 。 该 战略 提出 涵盖 用 户 、 市 场 以 及 政府 三 个 方面 


的 十 大 技术 原则 ， 明 确 了 联邦 政府 在 自动 驾驶 汽车 领域 的 主导 地 位 。 
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英国 着 重 培育 自动 驾驶 产业 环境 ， 促 进 本 国 行业 竞争 力 。 英 国 致 


力 于 推动 自动 驾驶 技术 处 于 世界 领先 地 位 。 英国 注重 个 人 数据 和 网 络 


信息 安全 ， 在 2017 年 8 月 友 布 的 《联网 和 自动 驾驶 汽车 网 络 安全 关 


键 原 则 》 中 提出 八大 原则 指出 评估 安全 风险 ,设计 和 管理 安全 系统 


数据 安全 存储 和 传输 等 的 重要 性 ,以 保护 自动 苞 驶 汽车 免 于 遭 到 网 络 


攻击 的 威胁 。2018 年 7 月 ， 瑞 国 出 台 《 自 动 化 与 电动 化 汽车 法 》, 这 


是 全 球 首部 为 自动 驾驶 设计 保险 制度 的 法 律 ,明确 目 动 苞 驶 汽车 友 生 


事故 后 ,可 根据 车 辆 的 投保 情况 由 保险 公司 以 及 车 主 来 承担 事故 损失 


融 来 的 赔偿 责任 。 此 外 ， 英 国 还 局 动 了 自动 罗 驶 汽车 法 律 审查 机 制 ， 


针对 自动 驾驶 事故 发 生 责任 确定 、 自动 罗 驶 汽车 刑事 犯罪 等 新 议题 音 


新 现 有 法 律 ， 推 动 自动 苞 驶 法 律 跟 上 技术 发 展 的 步伐 ,为 英国 率先 在 


高 速 公 路 上 使 用 自动 驾驶 汽车 铺路 。 


日 本 立法 环境 较为 开放 ， 明 确 自动 驾驶 技术 推进 时 间 表 。 日 本 是 


目前 为 止 自动 驾驶 相关 法 律 方面 走 在 世界 最 前 端的 国家 之 一 ,鼓励 局 


级 别 的 远程 无 人 自动 驾驶 的 测试 ,并 对 路 测 主 体 设置 了 更 为 全 面 的 安 


全 义务 性 规定 ， 提 出 到 2020 年 在 一 定 条 件 下 实现 在 高 速 公路 和 人 口 
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稀少 地 区 目 动 驾驶 的 目标 。2018 年 3 月 ， 日 本 政府 提出 《自动 芍 驶 


相关 制度 整备 大 纲 》, 对 自动 驾驶 汽车 友 生 事故 时 的 责任 问题 加 以 明 


确 ， 规 定 自动 驾驶 事故 损失 继续 使 用 《机 动车 损害 赔偿 保障 法 》 中 对 


民事 责任 的 要 求 。2019 年 5 月 ， 日 本 通过 了 《道路 运输 车 辆 法 》 的 


修正 案 ， 为 实现 自动 驾驶 产业 化 规定 了 安全 标准 。 


韩国 立法 推动 自动 驾驶 商业 化 ,率先 提出 自动 驾驶 安全 标准 。 
年 来 ， 韩 国政 府 大力 发 展 智能 汽车 ， 将 自动 驾驶 纳入 国家 战略 ， 提 出 
2030 年 成 为 未 来 型 汽车 世界 强国 的 目标 。2019 年 4 月 , 韩国 修订 《 汽 
车 事故 赔偿 法 》 规定 直 3 级 要 求 构 驶 员 应 当 随 时 准备 接管 自动 鸭 驶 汽 
车 ， 出 现 事故 的 ， 主 要 责任 从 仍 是 鸭 驶 者 本 人 。 此 前 ， 韩 国政 府 出 台 
《自动 芍 驶 汽车 商用 化 优 进 法 》， 规范 自动 芍 驶 汽车 提供 商业 服务 的 
行为 。 可 见 ， 韩 国政 府 正 在 为 “成 为 全 球 第 一 个 将 自动 鸭 驶 商业 化 的 
国家 ”加 紧 制 定 监 管 和 法 律 框架 。2020 年 1 月 ， 韩 国 国土 交通 部 发 
布 《 目 动 芍 驶 汽车 安全 标准 》， 针 对 自动 鸭 驶 汽车 的 部 分 功能 提出 有 
条 件 自 动 驾 驶 车 〈L3 级 ) 安全 标准 ， 为 轰 驶 员 提 供 安 全 保障 。 

我 国 在 立法 推进 上 更 为 谨慎 ， 推 动 形成 智能 网 联 汽车 发 展 路 线 。 





























入 | 











我 国 在 自动 当 驶 的 正式 立法 尚 在 研究 当中 ， 目 前 仍然 以 有 关 部 门 的 政 


策 指 导 的 方式 来 实行 自动 驾驶 汽车 的 监管 和 规范 。2018 年 4 月 ， 工 
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言 部 、 公 安 部 、 交 通 运输 部 联合 友 布 了 《智能 网 联 汽车 道路 测试 管理 


规范 ( 试行 为 ,对 测试 主体 、 测 试 驾 驶 人 及 测试 车 辆 、 测 试 申 请 


核 、 测 试管 理 、 交 通 违法 和 事故 处 理 等 方面 作出 规定 。2020 年 2 月 ， 


上 发改委 、 网 信 办 、 工 信 部 等 11 个 部 委 联合 印 友 了 《智能 汽车 创新 友 


展 战略 》, 提 出 到 2025 年 ,中国 标准 智能 汽车 的 技术 创新 .产业 生态 


基础 设施 、 法 规 标 准 、 产 品 监管 和 网 络 安全 体系 应 基本 形成 。 
表 6， 各 国 对 于 自动 加 驶 的 立法 规制 





国家 | 文件 名 发 布 时 间 | 主要 内 容 





《准备 迎接 未 该 文件 致力 于 推动 自动 驾驶 技术 与 地 面 








水 昌 父 2018 和 人 年 10 
人 玉 ! 月 | 交通 么 统 多 种 运输 民 式 的 安全 融合 
驾驶 汽车 3.0》 
该 法 案 旨 在 促进 自动 驾驶 技术 和 汽车 发 
展 ， 规 定 美国 联邦 对 自动 驾驶 汽车 设计 、 
年 芒 / 元 一 
人 ON 允许 自动 过 
本 2017 年 9 月 | 驶 汽车 在 公共 道路 上 测试 ， 呈 著 增加 自 
二 罗 动 驾驶 汽车 认 免 的 数量 并 逐年 提高 
立 自动 驾驶 汽车 委员 会 探索 自动 驾驶 汽 
车 安全 标准 
该 政策 围绕 自动 驾驶 汽车 性 能 指南 、 统 
一 的 州 政策 、 现 行 国家 公 ee 
《联邦 自动 驾 理 局 NHTSA) 监管 工具 、 新 的 监管 工 
、 2016 年 9 月 
驶 汽车 政策 》 展开 ， 为 自动 驾驶 安全 部 署 提供 政策 监 
管 框架 ， 从 而 为 有 效 利 用 技术 变革 提供 
指导 意见 

















英国 | 《自动 与 电动 | 2018 年 7 月 | 该 法 对 于 自动 各 驶 汽车 的 保险 制度 问题 
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国家 | 文件 名 发 布 时 间 。 | 主要 内 容 
汽车 法 》 做 了 专门 规定 
八大 原则 分 别 为 : 董事 会 部 署 、 管 理 并 
改进 组 织 机 构 安全 ; 适当 、 按 比例 评估 、 
管理 安全 风险 ， 包 括 供 应 链 特有 的 安全 
风险 ; 组 织 机 构 需 部 署 产 品 后 期 维护 和 
_ 事件 响应 ， 确 保 系统 在 整个 生命 周期 的 
| 安全 ; 所 有 组 织 机 构 ， 包 括 子 承 包 商 、 
驾驶 汽车 网 络 | 2017 年 8 月 
ee 供应 商 和 第 三 方 应 合作 改进 系统 安全 ; 
采用 深度 防御 方式 设计 系统 ; 在 软件 整 
个 生命 周期 内 ， 对 所 有 软件 进行 管理 
确保 数据 存储 与 传输 安全 ， 可 控 ; 确保 
系统 对 攻击 具有 弹性 ， 当 防御 机 制 或 传 
感 器 失效 时 ， 确 保 能 适当 予以 响应 
四 该 法 为 实现 自动 驾驶 实用 化 规定 了 安全 
《道路 运输 车 风 
2019 年 5 月 | 标准 ,允许 工 3 级 自动 驾驶 汽车 在 公路 上 
要 行驶 
《自动 驾驶 相 该 大 纲 规定 自主 行驶 时 的 事故 赔偿 责任 
关 制 度 整备 大 | 2018 年 3 月 | 原则 上 由 车 辆 所 有 者 承担 ， 可 以 利用 交 
纲 》 强 险 进行 赔付 
《自动 宏 驶 汽 | 0 生 | 日 | 该 坏人 对 自 动 宏 驶 汽车 的 部 分 功能 提出 
车 安全 标准 》 有 条 件 自动 驾驶 车 ( L3 级 ) 安全 标准 
该 法 明确 涉及 L3 级 自动 驾驶 汽车 的 事故 
全 本 责任 。 由 于 L3 级 要 求 驾 ee 
。 寺 ( 作 订 ) | 2019 年 4 月 | 备 接管 自动 宕 驶 汽车 ,因此 若 涉及 13 级 
韩国 自动 驾驶 汽车 的 事故 ， 主 要 责任 人 仍 是 
驾驶 者 本 人 
II 该 法 规定 了 自动 驾驶 汽车 商用 化 服务 规 
范 措施 ， 自 2020 年 5 月 1 日 起 正式 实施 
《韩国 汽车 管 | 2017 年 2 月 | 该 法 允许 在 城市 道路 上 测试 自动 驾驶 汽 
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国家 | 文件 名 发 布 时 间 | 主要 内 容 
理 法 》 车 ， 这 意味 着 韩国 道路 将 成 为 自动 驾驶 
汽车 测试 场 
战略 提出 到 2025 年 ， 中 国标 准 智能 汽 
《智能 汽车 创 二 
新 创新 发 展 战 | 2020 年 2 月 | 的 技术 创新 、 产 业 动 态 、 汉 础 设施 、 法 
风 规 标准 、 产 品 监管 和 网 络 安全 体系 基本 
_ 形成 
该 规范 主要 明确 了 规范 中 明确 了 测试 主 


体 、 测 试 季 驶 人 及 测试 车 辆 应 具备 的 条 
件 ， 以 及 测试 申请 及 审核 ， 测 试管 理 ， 
交通 违法 和 事故 处 理 等 内 容 


车 道路 测试 管 | 2018 年 4 月 
中 国 | 理 规范 ( 试行 





该 指南 主要 针对 智能 网 联 汽车 通用 规 











《国家 车 联网 范 、 核 心 技术 与 关键 产品 应 用 ， 指 导 车 
产业 标准 体系 二， 全 记 站 联网 产业 智能 网 联 汽车 标准 化 工作 ， 加 
建设 指南 ( 智能 快 构建 包括 整 车 及 关键 系统 部 件 功能 安 
网 联 汽车 全 和 信息 安全 在 内 的 智能 网 联 汽车 标准 

体系 





来 源 : 资料 整理 

2. 防止 深度 伪造 滥用 

美国 专门 针对 深度 伪造 予以 立法 规制 ， 欧 盟 、 德 国 、 新 加 坡 则 将 
深度 伪造 涵盖 在 不 实 信 息 或 虚假 新 闻 的 规制 空间 内 .。 但 不 管 是 采取 哪 
种 模式 ， 其 目的 都 是 为 了 最 大 限度 地 降低 深度 伪造 技术 对 个 人 、 社 会 
及 国家 带 来 的 危害 。 

美国 直接 对 深度 伪造 进行 立法 , 联邦 和 各 州 政府 层面 均 有 部 署 行 


动 。 美 国 担心 深度 伪造 对 2020 年 大 选 和 国家 安全 的 影响 ，2019 年 美 
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国 国 会 先后 提出 了 《2019 年 深度 伪造 报告 法 案 》 和 【《 深 度 伪 造 责任 


法 案 》。 此 外 ， 美 国 的 加 州 、 德 州 、 马 萨 诸 塞 州 、 弗 吉 尼 亚 州 等 也 陆 


续 推 出 了 相关 立法 。 这些 立 法 提出 的 主要 措施 包括 : 一 是 划 定 应 用 边 


界 ， 茶 止 政治 干 扰 、 色 情报 复 、 假 冒 身 份 等 非法 目的 的 深度 伪造 ， 否 


则 可 能 构成 刑事 犯罪 ; 二 是 设置 披露 义务 ， 要 求 制作 者 、 上 传 者 以 适 


当 方 式 披露 、 标 记 合成 内 容 ， 例 如 采取 钨 入 数字 水 印 、 文 字 、 语 音标 


识 等 方式 ; 三 是 加 强 技术 攻防 ， 呼 吁 开发 检测 识别 技术 和 友和 制 技术 。 


欧盟 主要 通过 虚假 信息 治理 等 限制 深度 伪造 技术 的 应 用 。 欧盟 委 


员 会 于 2018 年 4 月 友 布 的 《应 对 线 上 虚假 信息 : 欧洲 方案 》 集 中 前 


释 了 欧盟 委员 会 面 对 线 上 虚假 信息 挑战 的 基本 观点 ,提出 改进 信息 来 


源 及 其 生产 、 传 播 、 定 向 投放 和 获得 簧 助 方式 的 透明 硫 要 求 ， 还 规定 


了 改善 信息 的 多 样 性 ， 提 高 信息 的 可 信 度 ,制定 包 容 性 的 解决 方案 等 


原则 ， 以 实现 全 面 防 沱 视频、 图像 和 文字 等 虚假 信息 ， 吉 免 信 息 友 布 


者 违法 操纵 舆论 等 状况 。2018 年 9 月 ， 欧 盟友 布 其 历史 上 首 份 《 反 


虚假 信息 行为 准则 》， 旨 在 加 强 互联 网 企业 对 平台 内 容 的 自我 审查 ， 


从 源头 打击 网 络 虚 假 内 容 。 
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德国 利用 现 有 规制 网 络 内 容 立 法 ， 防 范 深 度 伪造 技术 的 危害 。 以 


深度 伪造 为 代表 的 人 工 智能 造假 技术 ,可 以 被 德国 已 有 互联 网 内 容 治 


理 法 律 所 调整 . 例如 德国 1997 年 出 台 的 《信息 和 传播 服务 法 》 和 2018 


年 通过 的 《社交 媒体 管理 法 》， 要 求 社交 媒体 公司 检查 被 投诉 内 容 ， 


限制 互联 网 提供 商 传播 非法 内 容 ， 设 置 “ 网 络 警 察 ” 监 控 危 害 性 内 容 


传播 ， 并 对 制作 或 传播 对 儿童 有 害 内 容 的 言论 视 为 犯罪 行为 。 除 此 以 


外 ， 德 国 相继 出 台 的 与 网 络 导 情 、 虚 假 信息 治理 相关 的 法 律 法 规 ,都 


可 以 用 来 有 效 打击 人 工 智 能 深度 伪造 行为 。 


新 加 坡 针对 网 络 虚 假 内 容 立 法 ， 兼 顾 调 整 深度 伪造 行为 。2019 


年 5 月 ， 新 加 坡 通过 《防止 网 络 虚 假 信息 和 网 络 操纵 法 》， 该 法 适用 


于 利用 深度 伪造 技术 制作 的 虚假 音 视 频 ,规定 政府 有 权 要 求 网 络 平台 


或 个 人 删除 损害 公共 利益 的 虚假 信息 ,并 对 不 遵守 指示 的 网 络 平台 或 


个 人 判处 监禁 或 并 处 罚金。 

我 国 相关 立法 也 开始 关注 深度 伪造 问题 , 侧重 人 格 权 保护 和 内 容 
管理 。 我 国 《民法 典 》 和 《网 络 信息 内 容 生态 治理 规定 》 中 对 深度 伪 
造 问题 进行 了 回应 ,规定 禁止 利用 信息 技术 手段 伪造 的 方式 侵犯 他 人 
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的 肖像 权 和 声音 


治理 白 








皮 书 


; 不 得 利用 深度 学 习 、 虚 拟 现实 等 新 技术 新 应 用 从 事 


法 律 、 行 政法 规 荣 止 的 活动 . 此 外 ,网络 音 视 频 信 息 服务 管理 规定 》 


还 专门 对 深度 伪造 问题 进行 了 一 系列 的 制度 设计 ,包括 规定 安全 评 佑 


要 求 、 显 著 方 式 予 标识 义务 、 


建立 健全 辟谣 机 制 等 。 
表 7 各国 对 于 深度 伪造 的 立法 规制 


不 得 制作 、 友 布 、 传 播 虚 假 新 闻 信 息 、 

















国家 文件 名 发 布 时 间 主要 内 容 
0 了 
造 慑 和 法 本 2019 年 6 月 ”| 的 定义 ， 规 定 国土 安全 部 定期 帮 
布 深度 伪造 技术 相关 报告 
该 法 案 要 求 任何 创建 深度 伪造 视 
《深度 伪造 责任 ee 必须 用 
法 实 ) 2019 年 6 月 | 删除 的 数字 水 印 以 及 文本 描述 
来 说 明 该 媒体 文件 是 纂 改 或 生成 
的 ， 和 否则 将 属于 犯罪 行为 
美国 全 要 史 。 该 法 将 利用 Deepfake 等 技术 制作 
、 2019 年 6 月 “| 深度 伪造 视频 企图 干扰 选举 的 行 
了 为 定义 为 刑事 犯罪 
犯罪 法 》 
该 法 对 制作 深度 伪造 内 容 引 发 犯 
罪 和 侵权 行为 的 个 人 ， 以 及 明知 
《2018 年 恶意 人 站 
ES 2018 年 12 月 | 交 媒 体 平 台 ， 进 行 罚 款 和 长 达 两 
年 的 监禁 。 如 果 伪 造 内 容 煽 动 暴 











力 、 扰 乱 政府 或 选举 ， 并 造成 严 
重 后 果 的 ， 监 禁 将 长 达 10 年 
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国家 | 文件 名 发 布 时 间 主要 内 容 
该 准则 旨 在 加 强 互联 网 企业 对 平 
| 2018 年 9 月 “| 台 内 容 的 自我 审查 , 从 源头 打击 
网 络 虚 假 内 容 
该 方案 集中 辣 释 了 欧盟 委员 会 
对 线 上 虚假 信息 挑战 的 基本 观 
点 ,提出 改进 信息 来 源 及 其 生产 、 
欧盟 传播 、 定 向 投放 和 获得 赞助 方式 
《应 对 线 上 虚假 的 透明 度 ,改善 信息 的 多 样 性 ， 
2018 年 4 月 人 
寺 息 : 欧洲 方案 》 提高 信息 的 可 信 度 ， 制定 包容 性 
的 解决 方案 等 原则 ， 以 实现 全 面 
防范 视频 ， 图 像 和 文字 等 虚假 信 
息 ， 避免 信 息 发 布 者 违法 操纵 负 
论 等 状况 
该 去 要 求 社交 媒体 公司 必须 设立 
(社交 如 体 管理 | ， je 1 让， | 有 关 程 序 ， 检查 自己 网 站 上 被 提 
法 》 出 投诉 的 内 容 , 并 在 24 小 时 之 内 
删除 明显 违法 的 信息 
该 法 涉及 互联 网 服务 商 的 责任 、 
《信息 和 传播 服 保护 个 人 隐私 、 数 字 签 名 、 网 络 
1997 年 6 月 、 
务 法 》 犯罪 和 保护 未 成 年 人 等 方面 , 是 
_ 部 全 面 的 综合 性 的 法 律 
该 法 使 政府 有 权 要 求 个 人 或 网 络 
《防止 网 络 虚假 平台 更 正 或 后 下 对 公共 利益 造成 
新 加 坡 | 信息 和 网 络 操纵 | 2019 年 5 月。 | 负面 影响 的 虚假 内 容 ， 该 法 适用 
法 》 于 利用 深度 伪造 技术 制作 的 虚假 
音 视频 
(| :on 年 3 月 | 议定 不 但 利用 信息 技术 
伪造 等 方式 侵害 他 人 的 肖像 权 
(网络 信息 内 容 该 法 规定 不 得 利用 深度 学 习 、 虚 
2020 年 3 月 





生态 治理 规定 》 








拟 现实 等 新 技术 新 应 用 从 事 法 
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国家 文件 名 发 布 时 间 主要 内 容 

律 、 行 政法 规 荣 止 的 活动 

该 规定 对 网 络 音 视频 服务 使 用 者 
和 提供 者 均 提 出 要 求 ， 即 利用 基 
于 深度 学 习 、 虚 拟 现实 等 的 新 技 
术 应 用 制作 、 发 布 、 传 播 非 真实 
音 视频 信息 的 ， 应 当 以 显著 方式 
予以 标识 ， 不 得 利用 基于 深度 学 
习 、 虚 拟 现实 等 的 新 技术 新 应 用 
制作 、 发 布 、 传 播 虚 假 新 闻 息 ， 
网 络 音 视 频 信 息 服 务 提供 者 应 当 
建立 健全 辟谣 机 制 








《网 络 音 视频 信 
息 服 务 管理 规 | 2019 年 11 月 


定 》 

















来 源 : 资料 整理 


金融 是 现代 经 济 的 核心 ,金融 服务 行业 也 一 直 是 技术 创新 的 积极 
实践 者 和 受益 者 。 人 工 智 能 目前 正 广泛 应 用 到 金融 业 中 ， 形 成 了 智能 
风 控 、 智 能 投资 、 智 能 区 易 、 智 能 投 顾 等 应 用 场景 。 具 体 而 言 ， 智 角 
金融 是 指 ,以 人 工 智能 为 代表 的 新 技术 与 金融 服务 .产品 的 深度 融合 . 


智能 金融 需要 有 新 的 监管 技术 ,各 国 对 智能 金融 产品 设置 了 灵活 性 的 


个 


在 管 规定 。 


有 


美国 直接 在 立法 文件 上 明确 人 工 智 能 投资 产品 的 法 律 义务 。2017 


年 2 月 ， 美 国 证 券 交 易 委员 会 ( SEC ) 的 投资 管理 部 帮 布 了 《智能 投 
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顾 指 南 》， 强 调 了 机 器 人 顾问 在 履行 《顾问 法 》 所 规定 的 法 律 义 务 。 
同一 时 期 SEC 的 投资 者 教育 与 倡导 办 公 室 还 发 布 了 《投资 者 公告 》， 
该 公告 引 在 教育 个 人 投资 者 有 关机 器 人 顾问 的 知识 ,并 帮助 他 们 决定 
是 否 使 用 机 器 人 顾问 来 实现 其 投资 目标 。 

欧盟 通过 一 般 法 令 强 化 对 于 人 工 智 能 金融 产品 对 监管 。 欧盟 帮 布 
了 《网 络 和 信息 系统 安全 指令 》 指 出 ， 在 银行 和 金融 市 场 基础 设施 领 
域 ， 操 作风 险 是 审慎 监管 的 重要 组 成 部 分 。《 不 公平 商业 指令 行为 》 
中 规定 ， 禁 止 不 公平 的 商业 行为 ， 列 明 违 背 专业 勤 人 勉 要求， 并 有 可 能 
曲解 消费 者 的 经 济 行为 。 其 中 ， 具 有 误导 性 的 行为 、 遗 漏 行为 以 及 侵 
略 性 行为 ( 包括 通过 电话 、 电 子 邮件 或 其 他 媒体 进行 持续 不 断 的 不 必 
要 的 推广 ) 都 属于 不 公平 的 商业 行为 。 

我 国 开始 对 人 工 智能 金融 应 用 进行 立法 , 侧重 于 鼓励 行业 发 展 和 
防范 风险 。2017 年 7 月 ,国务院 发 布 的 《新 一 代 人 工 智能 发 展 规划 》 
提出 了 “智能 金融 ”的 概念 ， 明 确 指 出 要 建立 金融 多 媒体 数据 处 理 与 
理解 能 力 ， 创 新 智能 金融 产品 和 服务 ， 发 展 金融 新 业态 。2018 年 4 


月 ， 中 国人 民 银 行 、 中 国 银行 保险 监督 管理 委员 会 、 中 国 证 券 监 督 管 


75 


人 工 智 能 治理 白皮书 








家 外 汇 管理 局 印 友 了 《天 于 规 学 金 融 机 构 资产 管理 业务 


理 委员 会 


旧 


的 指导 意见 》 ,对 人 工 智能 在 金融 领域 的 应 用 进行 了 规制 ， 从 胜任 性 


要 求 、 投 资 者 适当 性 以 及 透明 披露 方面 对 智能 投 顾 中 的 算法 进行 穿 透 


式 监 管 。《 证 券 法 》 规 定 ， 通 过 计算 机 程序 自动 生成 或 下 达 交 易 指 令 


进行 程序 化 交易 的 ,应 当 符 合 国务 院 证 券 监 督 管理 机 构 的 规定 ， 并 向 


证 券 交 易 所 报告 ， 不 得 影响 证 券 区 易 所 系统 安全 或 者 正 冲 交 易 秩 序 。 


表 8 ”各国 对 于 智能 金融 产品 的 规制 
国家 文件 名 发 布 时 间 主要 内 容 
指南 重点 关注 以 下 三 个 不 同 的 领 
域 并 就 机 器 人 顾问 如 何 应 对 这 些 
问题 提出 建议 :1 在 向 客户 披露 机 
器 人 顾问 及 其 投资 咨询 服务 的 相 
关 情 况 时 披露 的 内 容 及 采取 的 陈 
《智能 投 顾 南 》 | 2017 年 2 月 | 述 方式 ;2) 为 了 给 客户 提供 适当 的 
建议 从 客户 处 收集 相应 信息 的 责 
美国 任 ;3) 采 取 并 实施 有 效 的 合 规 管理 
制度 ,合理 设 计 制 度 内 容 ,以 解决 
与 自动 化 提供 建议 相关 的 特定 问 
题 
该 公告 旨 在 教育 个 人 投资 者 有 关 
机 器 人 顾问 的 知识 并 帮助 他 们 决 
定 是 否 使 用 机 器 人 顾问 来 实现 其 
受 资 目标 
《网 络 和 信息 系 该 立法 指出 在 银行 和 金融 市 场 基 


欧盟 2016 年 7 
统 安全 指令 》 人 础 设施 领域 操作 风险 是 审慎 监管 
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《投资 者 公告 》 | 2017 年 2 月 
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国家 文件 名 发 布 时 间 主要 内 容 
的 重要 组 成 部 分 
该 立法 禁止 不 公平 的 商业 行为 列 
AASNEZ 业 / 已 
Re 2005 年 5 月 | 明 违 背 专业 勤 扣 要 求 并 有 可 能 
| 解 消费 者 的 经 济 行为 
该 立法 涉及 到 智能 金融 监管 的 条 
款 主要 有 两 条 关于 程序 化 交易 的 
证 券 ; 2019 年 12 
王 12 月 | 规制 和 对 于 不 以 成 交 汶 目的 的 写 
意 申报 与 撤 单 的 规制 
中 国 | 《新 一 代 人 工 智 | ， 全， 日 | 该 讽 划 强 调 要 深化 金融 体制 改革 ， 
能 发 展 规划 》 健全 人 金融 监管 体系 
《关于 规范 金融 该 意见 对 智能 投 顾 资质 .算法 备案 
机 构 资产 管理 业 | 2018 年 4 月 “| 管理 . 程序 化 交易 算法 失效 的 监管 
务 的 指导 意见 》 做 出 规定 








来 源 : 资料 整理 


4. 促进 智能 医疗 发 展 


局 


年 来 ,人 工 智能 技术 与 医疗 健康 领域 的 融合 不 断 加 深 。 人 工 智 


能 技术 也 逐渐 成 为 影响 医疗 行业 发 展 ,提升 医疗 服务 水 平 的 重要 因素 。 


智能 医疗 的 应 用 场景 主要 包括 : 语音 录入 病历 、 医 疗 影像 辅助 诊断 、 


药物 研 友 、 医 疗 机 器 人 等 方面 。 目 前 美国 、 欧 盟 和 我 国 纷纷 出 台 文 件 


促进 人 工 智 能 医疗 的 友 展 。 


美国 发 布 相关 指 南 , 针对 智能 医疗 进行 广泛 指导 。 2019 年 9 月 ， 


美国 食品 药品 管理 局 ( FDA ) 上 友 布 《器 械 软 件 功能 和 移动 医疗 应 用 政 
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策 指 南 》， 以 告知 制造 商 、 分 销 商 和 其 他 组 织 FDA 如 何 监管 移动 平 
台 或 通用 计算 平台 上 使 用 的 软件 应 用 程序 。2019 年 9 月 ，FDA 还 颁 
布 了 《临床 决策 支持 指南 草案 》， 阐释 临 床 决策 文 持 软件 的 定义 以 及 
FDA 对 其 监管 的 学 围 。 

欧盟 通过 立法 为 智能 医疗 建立 起 体系 化 的 监管 方案 欧盟 于 2017 
年 4 月 帮 布 了 《欧盟 医疗 器 械 法 》， 该 立法 在 器 械 的 分 类 、 器 械 的 通 
用 安全 和 性 能 要 求 、 技术 文件 的 要 求 及 上 市 后 监管 体系 方面 进行 了 相 
应 改变 , 细 化 了 多 条 性 能 要 求 ， 强 调 将 风险 分 析 和 管理 贯穿 于 设计 和 
生产 、 销 售 、 上 市 后 监管 整个 产品 周期 中 ， 并 要 求 建 立 警戒 和 上 市 后 
监管 电子 系统 。 

我 国 基于 鼓励 发 展 的 态度 ， 开 展 对 于 智能 医疗 的 精细 化 监管 。 
2017 年 2 月 ， 国 家 卫 计 委 帮 布 《人 工 智能 辅助 诊断 技术 管理 规 学 ( 试 
行 )》 以 及 《人 工 智 能 辅助 治疗 技术 管理 规范 (试行 )》， 对 使 用 计算 机 
辅助 诊断 软件 及 临床 决策 支持 系统 提出 要 求 ， 明 确 以 诊断 准确 率 、 信 
息 采 集 / 佳 确 率 、 人 工 智 能 辅助 诊断 平均 时 间 以 及 人 工 智能 辅助 诊断 增 


蔡 率 作 为 人 工 智能 辅助 诊断 技术 临床 应 用 的 主要 考核 指标 ,为 人 工 智 
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能 应 用 于 临床 诊断 和 治疗 提供 了 规范 。2018 年 5 月 ， 国 务 院 发布 《 关 


于 促进 “互联 网 + 医疗 健康 ” 友 展 的 意见 》， 提 出 要 推进 “互联 网 + 


人 工 智 能 应 用 服务 ， 研 友基 于 人 工 智 能 的 临床 诊疗 决 贫 文 持 系统 , 开 


展 基于 人 工 智 能 技术 、 医 疗 健康 智能 设备 的 移动 医疗 示范 。 


人 工 智能 治理 





白皮书 





表 9 各 国 对 于 智能 医疗 的 规制 

















国家 文件 名 发 布 时 间 主要 内 容 
《器 械 软 件 功能 指南 告知 制造 商 、 分 销 商 和 其 他 组 
和 移动 医疗 应 用 | 2019 年 9 月 “| 织 如 何 监管 移动 平台 或 通用 计算 平 
政策 指南 》 台 上 使 用 的 软件 应 用 程序 
指南 进一步 盖 释 临床 决策 支持 软件 
的 定义 以 及 FDA 对 其 监管 的 范围 。 
《临床 决策 支持 
ee ” | 2019 年 9 月 | 还 新 增加 了 对 患者 决策 支持 软件 的 
讨论 ， 将 其 与 临床 决策 支持 软件 并 
列 分 析 
该 立法 在 器 械 的 分 类 、 器 械 的 通用 
见 上 明 医 疙 台 杷 之 个 和 性 角 本 求 久 要 求 
由 时 | 《可 明 医疗 器 械 | ,|) 年 ， 月 | 安全 和 性 能 要 求 、 技 术 文件 的 要 求 
法 》 及 上 市 后 监管 体系 方面 进行 了 相应 
改变 
该 意见 提出 要 推进 “互联 网 +” 人 
《关于 促进 “互联 工 智能 应 用 服务 ， 研 发 基于 人 工 智 
网 + 医疗 健康 " 发 | 2018 年 5 月 _| 能 的 临床 诊疗 决策 支持 系统 ， 开展 
展 的 意见 》 基于 人 工 智能 技术 、 医 疗 健康 智能 
设备 的 移动 医疗 示范 
工 智 能 辅 
局 AN ,生日 | 该 范 主要 对 使 用 计算 机 可 助兴 新 
] 攻 
全 软件 及 临床 决策 支持 系统 提出 要 求 
范 (试行 )》 
《人 工 智能 辅助 
该 规范 专门 对 使 用 机 器 人 手术 系统 
治疗 技术 管理 规 | 2017 年 ?月 | 
ee 辅助 实施 手术 的 技术 提出 要 求 
范 (试行 )》 
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五 、 人 工 智 能 治理 展 尾 

人 工 智 能 的 技术 发 展 与 产业 应 用 是 全 球 高 度 协 作 的 成 果 ,其 未 来 
的 上 友 展 依赖 世界 各 国 优势 互 补 、 合 作 共享 ,而 人 工 智能 市 来 的 社会 风 
险 也 具有 共生 性 、 时 代 性 、 全 球 性 的 特点 ， 没 有 一 个 国家 能 够 独 善 其 
身 ， 需 要 在 全 球 学 围 内 达成 治理 共识 。 因 此 ， 围 绕 全 球 人 工 智能 治理 
的 共同 问题 ， 需 要 立足 未 来 ， 加 强国 际 合作 ， 构 建 全球 人 工 智 能 治理 
的 命运 共同 体 。2019 年 11 月 ， 在 联合 国教 科 文 组 织 ( UNESCO ) 召 
开 的 第 40 届 大 会 期 间 ，193 个 会 员 国 决定 委托 该 组 织 束 人 工 智能 伦 
理 问题 制定 第 一 份 全 球 规范 性 文件 ,重点 天 注 人 工 智能 对 公平 正义 和 
人 类 权利 囊 来 的 挑战 ， 强 调 以 符合 伦理 的 方式 开 友 和 使 用 人 工 智能 ， 
并 文 持 推动 可 持续 发 展 目标 方面 的 国际 合作 。: 

〈 一 ) 坚持 包容 、 弹 性 的 治理 理念 

对 于 人 工 智能 治理 问题 的 纾 解 方式 ,应 放 在 不 同 国家 的 人 工 智 能 
发展 路 径 下 ， 以 及 不 同 的 场景 、 业 务 下 进行 讨论 ， 采 取 因 事 制 宜 , 包 


容 、 弹 性 的 治理 理念 。 一 方面 ， 不 同 国家 在 解决 人 工 智能 治理 相关 问 




















3 参见 UNESCO C40/37 号 决议 ，2019 年 1 
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根据 社会 科学 及 人 文科 学 委员 会 的 报告 通过 。 
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题 ( 如 隐私 保护 、 算 法 透明 、 数 据 跨 境 流 动 等 ) 时 ， 由 于 具有 不 同 的 
文化 历史 育 景 和 产业 发 展 基础 ， 拥 有 不 同 的 治理 目的 和 价值 ,实行 不 
同 的 法 律 和 监管 制度 ， 因 此 所 采取 的 治理 方式 可 能 存在 一 定 的 差异 。 
以 隐私 保护 为 例 ， 虽 然 各 国都 认同 应 该 保护 隐私 ,但 不 同 国家 对 于 隐 
私 的 理解 ， 以 及 隐私 的 重要 性 排序 有 着 明显 差异 ， 他 住 “隐私 优先 - 
( High-Privacy position ) 、 “隐私 平衡 ” ( Balance-Privacy position ) 
和 “隐私 限制 ” ( Limited-Privacy position ) 不 同 的 价值 判断 。 因 此 ， 
在 现 阶 段 开展 的 国际 人 工 智 能 治理 政策 讨论 和 制定 过 程 中 , 既 需 要 突 
出 全 球 各 国 的 共同 理想 和 退 求 ,例如 公平 非 上 收视 .最 大 化 福 社 等 方面 ， 
也 需要 尊重 和 理解 各 国 制度 设计 中 人 在 的 不 同 ,才能 在 合作 中 寻求 到 
民 好 的 治理 效果 。 另 一 方面 ， 人 工 智能 的 帮 展 具有 不 确定 性 ， 既 有 新 
的 治理 问题 ,也 有 老 的 监管 问题 ,有些 治 理 问题 是 传统 法 律 调整 后 可 
以 解决 的 ， 但 一 些 新 的 监管 问题 ， 难 以 适用 统一 的 规则 或 标准 予以 约 
束 ,应 当 从 场景 和 领域 出 友 进 行 具体 的 分 析 和 讨论 。 根 据 人 工 智 能 使 
用 场景 、 影 响 苍 围 、 可 能 的 危害 程度 的 不 同 ， 应 当 采 用 分 类 治理 的 思 


路 。 对 涉及 国家 安全 、 人 民 和 群众 生命 财产 安全 、 社 会 稳定 重大 敏感 利 
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蔡 等 “高 风险 ”的 人 工 智 能 应 用 场景 ， 例 如 自动 驾驶 、 智 能 医疗 等 领 
域 ， 应 当 加 强 事前 监管 ， 按 合理 审慎 的 原则 设置 必要 的 ) 佳 入 限制 和 约 
束 条 件 ; 对 于 与 个 人 消费 及 服务 相关 的 电子 商务 、 物 流 、 智 能 家 居 等 
“ 低 风 险 ” 人 工 智 能 应 用 领域 ， 采 取 基 于 结果 的 规制 思路 ， 侧 重 于 事 
中 事后 的 监管 。 
《二 ) 构建 不 同 阶段 的 治理 路 径 
人 工 智 能 是 人 类 社会 的 伟大 上 帮 明 ,同时 也 存在 巨大 的 社会 风险 ， 
包括 “技术 一 经 济 ”决策 导致 的 风险 ， 或 者 是 法 律 保 护 的 科技 文明 本 
身 市 来 的 风险 .法律 与 伦理 作为 两 种 重要 的 调整 手段 ， 可 以 通过 不 同 
方面 、 以 不 同方 式 、 采 用 不 同 机 制 对 社会 生活 的 不 同 领域 发 挥 各 自 的 
影响 和 作用 。 由 于 人 工 智能 技术 的 特殊 性 ， 既 需要 以 法 律 规 则 为 代表 
的 强制 性 和 要求， 规制 与 国家 安全 、 社 会 公共 利益 和 个 人 权益 密切 相关 
的 治理 问题 ， 也 需要 以 伦理 指南 为 代表 的 规 学 性 要 求 ， 引 导 产业 、 企 
业 进 一 步履 行 社 会 责任 ,增强 产品 和 服务 的 安全 性 、 可 靠 性 和 和 鲁 棒 性 。 
在 法 律 和 伦理 相互 配合 的 基础 上 ,可 以 通过 区 分 人 工 智能 各 发 展 阶段 ， 


来 明确 不 同 的 治理 重点 和 目标 。 
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1. 近期 应 加 快 制定 产品 和 服务 标准 ， 利 用 “数据 治理 ” 
推动 人 工 智能 治理 问题 的 解决 

这 一 阶段 仍 为 “ 弱 人 工 智能 ”， 即 人 类 主体 能 够 以 某 种 方式 对 人 
工 智能 产品 、 服 务 进 行 干预 ， 避 免 其 因为 设计 缺陷 、 使 用 不 当 ， 对 社 
会 和 个 人 带 来 负面 影响 。 也 就 是 说 ， 即 使 人 工 智能 治理 问题 出 现 ， 革 
一 方 主体 依然 可 以 通过 某 种 方式 解释 相关 决策 的 不 当 ,或 通过 经 济 手 
段 弥补 带 来 的 过 失 。 因 此， 现 阶段 的 法 律 问 题 更 多 体现 在 传统 法 律 适 
用 ， 而 不 是 创设 新 的 人 工 智能 法 律 制度 ,如 《自动 化 决策 法 》《 人 工 
智能 法 》 等 。 反 而 应 突出 技术 治理 发 挥 的 作用 ， 聚 焦 于 影响 人 工 智 能 
决策 结果 的 要 素 规制 ,最 大 程度 地 控制 和 减少 人 工 智能 带 来 的 公共 危 


险 和 对 私人 权利 的 侵犯 。 
在 治理 重心 方面 , 本 阶段 应 重点 关注 人 工 智 能 应 用 数据 对 个 人 权 


益 、 国 家 安全 和 企业 利益 带 来 的 影响 ， 以 及 人 工 智 能 在 重点 行业 领域 
的 应 用 。 一 方面 ,应 借助 “数据 治理 ”实现 对 于 算法 和 应 用 的 治理 ， 
加 快 个 人 信息 保护 、 数 据 安全 、 数 据 跨 境 流 动 、 数 据 共 享 交 换 等 制度 
建设 ， 平 衡 数 据 安全 与 数据 价值 之 间 的 关系 ， 充 分 挖掘 数据 潜在 的 价 


值 ,同时 尽 可 能 降低 数据 利用 的 成 本 和 控制 可 能 产生 的 风险 。 上 鉴于 数 
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据 多 元 主体 的 现状 ， 需 要 构建 “多 方 参与 、 分 层 监管 、 合 理 担 责 ” 的 


治理 体系 ， 协 调 政府 、 企 业 和 用 户 在 数据 使 用 中 的 关系 。 同 时 还 应 将 


安 观 数据 治理 规则 精确 提现 到 具体 的 应 用 场景 ,充分 砾 挥 数 据 的 作用 ， 


挖掘 数据 价值 。 另 一 方面 ， 明 确 的 行业 规范 是 人 工 智能 得 以 创新 发 展 


的 前 提 . 交通 、 医 疗 、 金 融 、 新 闻 等 领域 扎 个 人 生命 健康 、 财 产 安 全 、 


社会 稳定 密切 相关 ， 可 以 借 由 行业 协会 或 产业 联盟 对 市 场 进行 规范 ， 


以 出 台 行 业 标准 规范 的 方式 提升 产品 和 服务 的 稳定 度 与 质量 ,同时 辅 


以 保险 、 承 诸 等 手段 弥补 可 能 对 个 人 或 社会 市 来 的 损失 。 


在 治理 方式 上 ,企业 负责 产品 的 研发 与 运营 ， 将 是 本 阶段 主要 的 


治理 主体 ， 可 以 依托 平台 、 技 术 等 手段 实现 自我 监督 ,政府 监管 部 门 


并 不 需要 过 多 干预 产品 和 服务 上 线 前 的 流程 。 针 对 人 工 智能 的 风险 ， 


企业 需要 有 针对 性 的 准备 措施 及 预案 ,确保 人 工 智能 系统 在 其 整个 生 


命 周期 内 安全 、 可 靠 、 可 控 地 运行 。 企 业 应 当 加 强 评估 人 工 智 能 系统 


的 安全 性 和 潜在 风险 ,不 断 提高 系统 的 成 熟 度 、 稳健 性 和 抗 干扰 能 


确保 系统 可 航 人 类 监督 和 及 时 接管 ， 避 免 系 统 失 控 的 负面 影响 。 当 产 


品 和 服务 进入 市 场 后 ， 政 府 部 门 应 结合 监管 需求 ， 对 数据 市 场 竞 争 、 
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2. 中 远 期 应 调整 责任 法 律 制度 , 实现 法 律 与 伦理 相 衔接 
这 一 阶段 的 特点 是 人 工 智能 的 自主 性 将 进一步 增强 ,可 能 脱离 了 
设计 者 的 目标 和 初衷 ,但 人 类 仍 可 以 通过 某 种 方式 对 人 工 智 能 系统 输 
出 结果 进行 干预 ， 但 应 遵循 “ 非 必要 不 干预 ”原则 。 在 这 一 阶段 下 ， 
人 工 干预 与 机 器 自主 决策 同时 友 挥 作用 ,对 于 法 律 制度 的 影响 更 多 将 
体现 在 责任 机 制 的 调整 上 ,尤其 是 传统 的 产品 责任 能 否 适 用 于 人 工 智 
能 为 代表 的 软件 及 系统 服务 。2020 年 2 月 19 上 日， 欧盟 委员 会 发 布 的 
《天 于 人 工 智 能 、 物 联网 和 机 器 人 对 安全 和 责任 的 影响 的 报告 》 提 及 
了 这 一 重要 问题 ,进一步 分 析 了 人 工 智能 、 物 联网 和 其 他 数字 抠 术 对 
欧盟 相关 安全 和 责任 立法 框架 的 影响 ， 提 出 了 包括 人 工 干预 辅助 、 强 
制 算法 透明 度 要 求 .供应 链 法 律 责任 分 配 、 联合 产品 安全 立法 等 建议 ， 
为 讨论 下 一 阶段 人 工 智 能 治理 重点 和 方式 提供 了 有 葵 参考 。 
在 治理 重心 上 , 由 于 对 于 产业 链 上 的 不 同 主体 实现 公平 有 效 的 责 
任 分 配 可 能 是 很 困难 的 ， 以 伦理 、 治 理 指南 等 为 代表 的 规制 方式 将 是 
此 阶段 治理 的 中 心 。 可 以 通过 出 台 涉 及 国家 行业 .、 企业 的 治理 指南 ， 


出 台 标 准 指引 等 方式 加 强 相关 指南 原则 的 落地 实施 ,避免 人 工 智 能 系 
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统 用 于 非法 或 违反 伦理 的 目的 。 与 此 同时 ， 各 国 应 重新 评估 自发 性 的 
人 工 智能 技术 及 应 用 对 现行 侵权 责任 、 刑事 责任 体系 带 来 的 影响 , 明 
确 人 工 智 能 研发 设计、 制造 . 运营 和 服务 等 各 环节 主体 的 权利 义务 ， 
研究 在 产品 责任 法 律 体系 中 纳入 软件 等 新 要 素 的 可 行 性 ,同时 在 部 分 
领 吉 探 索 算法 透明 度 的 要 求 和 程序 。 

在 治理 方式 上 , 政府 应 倡导 相关 企业 和 组 织 在 法 律 框架 下 创建 责 
任 分 担 机 制 ， 合 理 分 担 人 工 智能 可 能 带 来 的 风险 。 企 业 应 加 强 社会 宣 
传教 育 ,提升 人 工 智能 用 户 人 群 的 自我 权益 保护 意识 ， 降 低 人 工 智能 
发 展 过 程 中 可 能 存在 的 伦理 风险 . 第 三 方 行业 协会 及 产业 联盟 将 是 政 
府 、 企 业 之 外 更 加 重要 的 治理 主体 。 一 方面 ， 第 三 方 机 构 可 以 更 好 体 
现 产业 发 展 的 诉求 ;牵头 撰写 相关 的 治理 原则 及 落地 措施 ， 避 免 强 抽 
性 规则 对 产业 发 展 带 来 不 必要 的 阻碍 . 另 一 方面 ,在 涉及 政府 部 门 对 
于 算法 等 新 技术 要 素 监管 方面 ,第 三 方 机 构 能 够 发 挥 专业 作用 ,组 织 
开展 相关 的 评估 和 测评 工作 ， 为 监管 提供 有 效 的 支持 和 帮助 。 此 外 ， 
国际 组 织 也 需要 提前 考虑 超人 工 智能 时 代 对 于 人 类 权利 和 社会 体系 


的 影响 ， 明 确 未 来 社会 中 的 人 类 地 位 与 基本 权利 ， 实 现 可 持续 发 展 的 
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目标 。 
(三 ) 打造 多 元 共 治 的 治理 机 制 

人 工 智 能 治理 的 重要 特征 之 一 是 治理 主体 的 多 元 化 、 治理 手段 的 
多 样 化 ， 需 要 打造 多 元 主体 参与 、 多 措 并 举 、 协 同 共 治 的 治理 机 制 。 
这 依赖 于 包括 国际 组 织 、 政 府 、 行 业 、 企 业 、 公 众 等 多 利益 依 关 方 的 
参与 合作 ， 需 要 各 方 各 司 其 职 、 各 尽 其 能 ， 以 适当 的 角色 、 最 佳 的 手 
段 协 同 共 治 。 可 以 这， 人 工 智 能 这 样 的 新 扩 术 正在 催生 社会 治理 体系 
和 机 制 的 变革 ,从 传统 的 政府 主导 的 权威 式 自 上 而 下 的 单 向 管理 走向 
多 元 主体 协同 共 治 的 治理 新 范式 ， 综 合 多 个 主体 、 多 种 手段 的 优势 ， 
保持 开放 灵活 的 状态 ， 及 时 根据 扩 林 发展 需要 进行 动态 调整 。 

从 国际 层面 来 看 ,政府 间 国 际 组 织 可 以 通过 开展 国际 对 话 、 协 调 
与 合作 的 方式 ， 确 保 人 工 智能 技术 的 发 展 和 应 用 能 够 造福 人 类 。 国 际 
合作 并 不 意味 着 各 国 一 定 要 遵循 同一 套 人 工 智 能 规 学 、 标 准 或 者 法 规 ， 
也 不 意味 着 方方面面 至 始 至 终 需要 订立 国际 协定 。* 而 是 在 充分 尊重 


各 国人 工 智能 治理 原则 和 实践 的 前 提 下 ,探索 各 国 在 人 工 智能 规 泡 及 


4 OhEigeartaigh， S.$., Whittlestone, J., Liu, Y. et al. Overcoming Barriers to Cross-cultural Cooperation in 
AI Ethics and Governance. Philos. Technol. (2020). 
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所 导 方针 方面 重 亚 共识 的 领域 ， 从 而 确保 人 工 智能 对 人 类 有 益 


取 的 合作 方式 包括 :各 国人 工 智能 研究 人 员 合 作 完 成 项 目 ， 确 保 人 工 


智能 安全 可 控 ; 建立 各 国平 等 沟通 的 渠道 ， 确 保 国 际 讨论 能 够 汲取 多 


样 的 国际 视角 ; 邀请 各 国 利益 相关 者 寻求 共识 、 弥 合 分 上 层 ， 人 参与 制 


讲 


治理 规则 等 。 

从 国家 层面 来 看 , 政府 应 当 肩 负 起 对 人 工 智能 技术 及 服务 监督 管 
理 的 职责 ， 为 人 工 智 能 营造 良好 的 发 展 环境 。 首 先 ， 人 工 智能 作为 一 
项 集合 多 学 科 知识 、 高 度 复杂 的 技术 ， 政 府 应 当 优 化 相关 职能 机 构 ， 
选 披 具 有 人 工 智 能 背景 的 专业 人 才 参 与 到 政府 治理 过 程 中 ,为 人 工 智 
能 治理 体系 的 构建 提供 理论 又 撑 ,从 而 以 务实 审慎 的 态度 推动 人 工 智 
能 的 上 友 展 。 其 次 ， 人 工 智 能 所 寓 来 的 创新 多 样 性 和 不 可 预测 性 ， 需 要 
更 具 弹 性 、 适 应 性 和 可 操作 性 的 监管 方式 。 政 府 应 当 从 基于 具体 规则 
的 监管 方式 转变 向 基于 原则 的 监管 方式 ， 避 免 过 于 详细 、 严 格 的 事前 
监管 ， 可 以 将 监管 细节 留 给 人 工 智能 提 南 、 行 为 规范 、 认 证 规则 等 进 
行 更 加 灵活 的 规定 。 同 时 ， 政 府 应 加 强 与 行业 、 企 业 的 互动 和 交流 ， 


增强 监管 决策 的 针对 性 和 有 效 性 ,避免 在 对 人 工 智能 主观 预测 的 基础 
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上 做 出 决策 。 最 后 ， 政 府 应 当 建 立 健全 配套 体系 ， 可 以 在 先行 试验 基 


础 上 评估 人 工 智能 的 社会 影响 ,适时 修订 立法 中 与 人 工 智能 必 展 不 相 


适应 的 部 分 ， 探 索 可 能 的 算法 监管 路 径 ， 防 学 数据 安全 风险 ， 构 建 结 


构 合理 目 责任 明晰 的 人 工 智能 产品 责任 体系 。 

从 行业 组 织 层面 来 看 行业 组 织 可 以 通过 制定 技术 标准 、 倡 导 行 
业 自律 等 方式 推动 人 工 智能 规范 发 展 。 人 工 智能 治理 需 深入 行业 中 去 ， 
从 每 个 行业 的 实践 中 去 探索 和 实践 。 一 方面 ,行业 组 织 可 以 推动 构建 
动态 的 人 工 智能 研发 应 用 评估 评价 机 制 ,围绕 人 工 智能 设计 、 产 品 和 
系统 的 复杂 性 、 风 险 性 、 不 确定 性 和 可 解释 性 等 问题 ， 制 定 测试 方法 
和 标准 体系 ， 推 动人 工 智能 安全 认证 。 另 一 方面 ,行业 组 织 可 以 制定 
行业 自律 公约 ， 明 确 人 工 智能 开发 应 用 的 基本 原则 和 行动 指南 ,为 相 
关 企业 提供 行业 自律 指导 和 建议 ， 强 化 企业 的 社会 责任 意识 ,推动 行 
业 自律 有 效 开展 . 

从 企业 层面 来 看 ,企业 可 以 通过 建立 内 部 自律 机 制 、 研 发 技术 工 
具 等 方式 ， 推 动 治理 举措 的 落地 实践 。 一 方面 ， 交通 、 医 疗 、 金 融 竺 


行业 的 相关 领军 企业 在 人 工 智 能 研发 和 应 用 过 程 中 应 当 强 化 社会 责 
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任意 识 ， 推 动 行 业 自治 ,制定 人 工 智能 行业 从 业 人 员 行 为 规范， 加 强 
从 业 人 员 自 我 约束 ， 开 展 伦 理 审 查 ， 确 保 企业 各 环节 严格 遵守 伦理 规 
则 。 另 一 方面 ， 企 业 加 快 推动 人 工 智能 安全 可 信 技 术 研发 ， 强 化 人 工 
智能 产品 和 系统 的 网 络 安全 防护 能 力 ,全 球 企业 的 交流 协作 也 公关 重 
要 ,广泛 的 交 沅 有 助 于 解决 人 类 共同 面临 的 人 工 智能 技术 创新 和 探索 。 

从 公众 层面 来 看 , 公众 是 治理 过 程 中 的 重要 参与 者 ， 可 以 适当 介 
入 到 治理 监督 过 程 中 ， 维 护 自身 合法 权益 。 一 方面 ,公众 可 以 通过 人 
工 智能 产品 的 投诉 举报 等 监督 渠道 ,实现 对 人 工 智 能 技术 的 监督 和 意 
见 反 馈 ， 为 人 工 智能 治理 献计 献策 ,使 人 工 智 能 帮 展 真正 地 “以 人 为 
本 ”。 另 一 方面 ,公众 可 以 参加 人 工 智能 公共 伦理 教育 ， 减 轻 对 于 人 
工 智 能 技术 的 恐慌， 提高 自身 的 伦理 安全 防 学 意识 。 公 众 还 可 以 积极 
参与 岗位 被 著 代 人 员 的 数字 秀 动 技能 再 培训 活动 ,主动 应 对 现 有 和 未 
来 的 秀 动 力 挑战 问题 。 

人 工 智 能 时 代 已 经 到 来 ， 各 方 主体 要 以 伦理 的 力量 、 法 律 的 理性 


引领 和 规制 人 工 智 能 技术 的 发 展 ， 确 保 人 工 智 能 技术 更 加 安全 可 控 ， 








更 合乎 伦理 和 法 理 ， 使 人 工 智能 成 为 促进 社会 有 序 友 展 、 共 享 友 展 、 


公平 必 展 、 开 放 必 展 、 和 谐 发 展 的 生产 力 基 础 。: 














5 张 文 显 .构建 智能 社会 的 法 律 秩 序 U/oU]. 东 方法 学 :1-14[2020-09-09]. 
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